Hugging Face 下载模型指南:手把手教你玩转
创作时间:
作者:
@小白创作中心
Hugging Face 下载模型指南:手把手教你玩转
引用
1
来源
1.
https://cloud.tencent.com/developer/article/2509399
Hugging Face 已成为 NLP 和 AI 开发者的必备工具,它提供了丰富的预训练模型,帮助我们快速进行模型训练与推理。但是,如何高效地将模型下载到本地?
👉 你可以选择:
- •Hugging Face CLI 下载:适合直接下载模型文件,无需写代码。
- •Python 代码下载:适合在项目中动态加载和缓存模型。
方法一:使用 Hugging Face CLI 下载模型
第 1 步:安装 Hugging Face CLI 工具
打开命令行(
cmd
或
PowerShell
),输入以下命令进行安装:
pip install huggingface_hub
说明:
- •
huggingface_hub
模块包含
huggingface-cli
,用于从 Hugging Face 下载模型文件。
第 2 步:登录 Hugging Face 账户(仅限私有模型)
如果你要下载私有模型或使用高权限 API 访问,需要登录 Hugging Face 账户。
huggingface-cli login
获取 Access Token:
- • 访问 Hugging Face 账户页面。
- • 选择New Token并生成一个具有
Read
权限的 Token。
- • 在 CLI 提示中粘贴 Token:
第 3 步:下载模型
使用
huggingface-cli download
下载模型:
huggingface-cli download shibing624/text2vec-base-chinese
模型文件将保存在
~/.cache/huggingface/hub
目录,windows的就是在
C:\Users<你的用户名>.cache\huggingface\hub
目录。
如果你希望将模型下载到自定义路径,可以使用
--cache-dir
参数:
huggingface-cli download shibing624/text2vec-base-chinese --cache-dir ./my_model
方法二:通过 Python 代码下载模型
第 1 步:安装必要的依赖
在 Windows 系统上,同样需要安装
transformers
和
huggingface_hub
:
pip install transformers huggingface_hub
说明:
- •
transformers
:用于加载预训练模型。 - •
huggingface_hub
:提供下载和管理模型的 API。
第 二 步:通过 Python 下载模型
from transformers import AutoModel, AutoTokenizer
# 模型名称,例如 "shibing624/text2vec-base-chinese"
model_name = "shibing624/text2vec-base-chinese"
# 下载并加载模型和分词器
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModel.from_pretrained(model_name)
# 保存到自定义路径(可选)
model.save_pretrained("./my_model")
tokenizer.save_pretrained("./my_model")
说明:
- • 模型会缓存在
C:\Users<你的用户名>.cache\huggingface\hub
目录下。 - •
model.save_pretrained()
可将模型保存到自定义路径(如
./my_model
)。
参考文档:
- Hugging Face 官方文档
- Hugging Face CLI 快速入门
热门推荐
呼伦贝尔大草原:《敖包相会》的绝美背景
干细胞技术应用全景:已实现下颌骨复制,600项临床试验在研
中国首款干细胞药物获批,将用于治疗难治性aGVHD
綦江:村里通了天然气 “点燃”村民幸福生活
天然气管道安装规范
抑郁症伴发白天嗜睡,从神经机制到治疗方案详解
环境调整加专业治疗,有效应对抑郁睡眠障碍
东山岛摄影攻略:风动石&南门湾的完美取景
2008年北京奥运会:绿色奥运理念的实践与创新
东山岛最美海岸线徒步攻略:南门湾、苏峰山环岛路、马銮湾全攻略
宋一国三子已成170cm少年,10年家庭生活首度曝光
宋一国三胞胎12岁再登综艺,身高引惊叹收视破纪录
睡醒一身汗?从环境到饮食,全方位应对夜间出汗
睡醒一身汗?从环境到心理,全方位破解夜间出汗难题
4款药膳助缓解盗汗,专家推荐调理方案
从心理到药物:专家解析抑郁症盗汗应对方案
盗汗不止?四大原因及科学应对方案
法院判决如何区分“失能”和“失信”?
“三所联动”与四方调解:社区纠纷化解的新路径
北京市西城区法院教你化解纠纷中的心理难题
中国古代司法的“无讼”智慧
青花蓝:2008北京奥运会服饰设计的文化密码
青花瓷&云锦:北京奥运服饰的秘密武器
2008北京奥运会服饰里的传统文化,你最爱哪一款?
上班族点外卖都吃啥?你的工作餐健康吗?
LOL六大打野英雄一级教学:技能装备全攻略
宋家庄到朝阳高铁站最快换乘攻略
北京地铁游览攻略:宋家庄到朝阳高铁站
章含之回忆录:一部见证中国社会变迁的个人史诗
章含之回忆录:尼克松访华幕后的外交传奇