项目场景:
使用huggingface 下载数据集。
问题描述
运行命令:
wget https://huggingface.co/datasets/yangtaointernship/RealEstate10K-subset/resolve/main/google_scanned_objects.zip?download=true
完整报错如下:
--2024-08-30 15:48:04-- https://hf-mirror.com/datasets/yangtaointernship/RealEstate10K-subset/resolve/main/google_scanned_objects.zip
Resolving hf-mirror.com (hf-mirror.com)... 133.242.169.68, 153.121.57.40, 160.16.199.204
Connecting to hf-mirror.com (hf-mirror.com)|133.242.169.68|:443... connected.
HTTP request sent, awaiting response... 401 UnauthorizedUsername/Password Authentication Failed.
原因分析:
需要下载的 数据集/模型 需要登录,因此返回这个错误。
解决方案:
首先需要新建一份token
新建token的教程如下:https://huggingface.co/docs/hub/en/security-tokens
然后再用命令行下载,输入刚才新建的tokens:
huggingface-cli download --token hf_*** --resume-download meta-llama/Llama-2-7b-hf --local-dir Llama-2-7b-hf
完美解决!