Skip to main content

学术资源加速

模型、数据集下载加速​

在AladdinEdu平台中，我们缓存了很多开源模型，可以加速下载。

  1. 设置HF_ENDPOINT环境变量：
export HF_ENDPOINT=http://hfmirror.mas.zetyun.cn:8082
  1. 使用以下命令查看模型、数据集缓存列表：
# 展示所有已缓存模型名称
 curl -s http://hfmirror.mas.zetyun.cn:8082/repos | grep -oP '(?<=<div class="header">)[^<]+' | sort | sort

model0

如有其他模型或数据集需求，可联系平台客服添加至缓存中~

  1. 确保已安装 huggingface_hub 库的情况下，使用以下命令下载模型、数据集，下载平均速度可达60MB/s：
#以下载 Qwen2.5-1.5B-Instruct 模型为例
huggingface-cli download --resume-download Qwen/Qwen2.5-1.5B-Instruct --local-dir Qwen/Qwen2.5-1.5B-Instruct
# 以下载 AirV2X-Perception 数据集为例
huggingface-cli download --resume-download xiangbog/AirV2X-Perception --repo-type dataset --local-dir /root/dataset/AirV2X-Perception

model1

Github加速​

若需要从Github拉取项目，可在workshop中的终端配置以下中转命令进行加速。

git config --global url."https://gh-proxy.com/github.com/".insteadOf "https://github.com/"