使用huggingface镜像进行模型下载加速
系统环境:CentOS 7
安装openssl 1.1.1+版本,使用下载器要求openssl1.1.1+版本
安装Python3环境,使用openssl 1.1.1+编译安装
./configure --prefix=安装目录 --with-openssl=/path/of/openssl
3.python3安装requests、huggingface_hub模块
pip3 install requestspip3 install huggingface_hub
4.下载脚本
wget https://aliendao.cn/model_download.py
5.以https://aliendao.cn/models/THUDM/chatglm2-6b为例
python3 model_download.py --repo_id THUDM/chatglm2-6b --mirror