提交分布式训练

更新时间:

参考本节提交分布式离线训练任务,训练完成后即释放占用的计算资源。
主流分布式训练框架均可参考本章提交训练,但多任务角色的情况下,需分别指定启动命令。

# 前提条件

  • 您的账户下配额剩余量足够。
  • 您的模型训练代码是支持分布式的。
  • 项目中已挂载数据。
  • 项目中已添加预训练模型。
  • 项目中已保存了稳定的可用于离线训练的代码版本。

# 操作步骤

# 1. 进入 “提交训练任务” 页面

  1. 在平台首页,左侧导航栏中选择 项目
  2. 单击目标项目卡片,进入该项目的 代码预览 页。
  3. 在左侧导航栏中选择 训练,进入 训练任务 页面。
  4. 单击右上角 提交任务 按钮,进入任务配置页面。

# 2.填写任务信息

您可参考如下说明,填写任务信息。

  • # 训练任务名称

    不可超过 64 个字符。

  • # 任务模式

    选择 自定义分布式任务

    说明:将一个任务在多个实例中运行,从而达到多机多卡的训练效果。可添加任务角色,任务角色代表不同的 AI 训练目标,每个任务角色可以拥有不同的计算资源配置。

  • # 资源组

    分布式任务不能跨资源组。

  • # 资源配置

    1. 任务角色1 中配置该角色的 实例个数实例规格

      • 实例个数
        可理解为参与训练的机器数,比如可配置为 3。
      • 实例规格
        配置方法参考 资源配置
    2. (可选)单击 任务角色1 旁的 + 号,新增任务角色。 如果任务不涉及多个任务角色,则无需执行本步骤及下一步。

    3. (可选)为 任务角色2 设置 实例个数资源配置启动命令

# 3. 提交任务

单击 提交 按钮。