如何获取常用模型和数据集

本文为您详细介绍如何在开发机训练开始前做模型和数据集的准备,平台开发机挂载了只读共享大盘,收集了主流的模型和数据集,无需再从huggingface获取。

获取模型

模型路径存储在/public/huggingface-models下,您可以通过cp -r /public/huggingface-models/目标模型目录/模型文件夹名称 /data将目标模型文件夹下所有文件存储到开发机的共享存储卷中。

获取数据集

数据集路径存储在/public/huggingface-datasets下,您可以通过cp -r /public/huggingface-datasets/目标数据集目录名称 /data将目标数据集文件夹下所有文件存储到开发机的共享存储卷中。