TGViewer
开发者工具箱|编程·开发工具·资源 开发者工具箱|编程·开发工具·资源 @devtoolboxhub · 570 subscribers
Post #1319 8
Hugging Face 缓存溢出解决方案

Hugging Face 模型下载默认存入 ~/.cache/huggingface,140GB+权重极易撑爆系统盘。以下是 Linux 下的工程级缓存管理方案,避免存储耗尽与生产崩溃。

避免使用废弃的环境变量 TRANSFORMERS_CACHE 和 HUGGINGFACE_HUB_CACHE,应统一使用 HF_HOME。
禁用符号链接法:存在权限提升风险,不推荐。
步骤1:永久修改缓存路径
在 ~/.bashrc 追加 export HF_HOME="/mnt/massive_drive/ai_model_cache" 并 source。
步骤2:Python 中必须在 import transformers 前设置 os.environ["HF_HOME"]。
步骤3:使用 huggingface-cli scan-cache 和 huggingface-cli delete-cache 安全清理。
步骤4:生产环境只读卷需设置 os.environ["HF_HUB_OFFLINE"]="1" 避免写锁文件崩溃。


通过以上配置可彻底解决存储陷阱,确保生产环境稳定运行。

#开发者 #工具 #HuggingFace #缓存 #模型部署 #Linux #DevOps #AI
@DevToolboxHub
More from @devtoolboxhub
  1. Sep 30, 2026AMSI 绕过技术 2026 开发者指南 AMSI(Antivirus Malware Scan Interface)是 Windows 的恶意脚本扫描接口,覆盖 PowerShe…
  2. Sep 30, 2026AI Agent 为什么记不住事 和 AI Agent 协作时最容易注意到的一点是:它们很擅长回答问题,却不擅长记住昨天发生过什么。你可以和它长聊一轮,做出一堆决定、说明偏好、一起…
  3. Sep 30, 2026wpipe:面向 Python 开发者的轻量编排库 wpipe 是一个纯 Python 可嵌入的编排库,目标是让数据管道的开发回到「编辑—运行—调试」的快速循环,而不必为验证业务逻…
  4. Sep 29, 20262,916 个 AI 网站 8 月流量:转录与图生 3D 起飞 Anjin Radar 追踪了 2,916 个 AI 网站的月度访问量,数据截至 2026 年 9 月 28 日。访…
  5. Sep 29, 2026Python 虚拟环境其实是个软链接 在 Linux 和 macOS 上执行 python3 -m venv .venv,并不会复制一份 Python。venv 里的 python…
  6. Sep 29, 2026Will It Focus:相机自动对焦兼容性查询 Agent 这是一个面向摄影器材的自动对焦兼容性查询工具,但它真正的看点在于工程实现:如何让模型引用厂商原文时,保证引用的确实是…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →