跳转到主要内容
数据集用于为开发环境和训练任务提供输入数据。您可以从平台提供的数据集中选择所需内容,并在创建工作负载时挂载读取。

基本概念

选择数据集

选择数据集前,请确认目标数据集在当前区域、集群和工作负载中可用。

使用路径

  1. 确认目标数据集在当前区域、集群和工作负载中可用。
  2. 创建开发环境或训练任务时,选择数据集,按需指定子目录,并配置容器内挂载路径。
  3. 在代码中通过挂载路径读取数据,将训练输出、checkpoint、Notebook 或临时文件写入可写 Volume。
  4. 如果同一数据集会被反复读取,并且项目中已使用数据集缓存能力,可以为数据集配置缓存。

读写边界

数据集通常作为输入数据使用。挂载数据集不会自动改写脚本,也不会转换数据格式。代码中的数据路径需要与容器内挂载路径保持一致。 如果程序需要写入输出文件、缓存文件、训练产物或模型文件,请使用可写 Volume。不要将输出写入数据集挂载路径,也不要将数据集挂载到镜像自带的关键目录。

相关文档