创建训练作业 创建训练作业 前提条件 自定义作业需要依赖于BOS对象存储读取输入文件,创建自定义作业之前需要保证您已经开通了BOS对象存储的服务。 授权自定义作业读写您的BOS对象存储,以顺利进行自定义作业的配置。 在BOS中存储创建Bucket,并且存储用于训练的代码文件和数据集,创建一个空文件夹用于输出文件的存储 新建作业 在导航栏选择『自定义作业-训练作业』,进入训练作业的列表页。
删除模型精调作业 接口描述 本接口用于删除模型精调作业。 权限说明 调用本文API,需符合以下权限要求,权限介绍及分配,请查看 角色与权限控制列表 、 账号创建与权限分配 。
创建模型精调作业 功能介绍 用于创建模型精调作业。 例如,新增作业名称为test_crea,基础模型版本为ERNIE-Speed-8K,调优的训练模式类型为SFT,作业描述为eb_speed_tasks,调用本接口成功后,在 控制台-模型调优-模型精调-SFT 页面,作业列表新增一条作业,如下图所示。
scancel scancel 是 slurm 提供的用于取消正在运行的作业或任务的命令。 基本用法如下: scancel [OPTIONS] job_id 一些常用的选项包括: -u, --user: 取消特定用户提交的作业。 -t, --state: 取消特定状态的作业。 -n, --name: 取消特定作业名称的作业。
授权自定义作业读写您的BOS对象存储,以顺利进行自定义作业的配置。 在BOS中存储创建Bucket,并且存储用于训练的代码文件和数据集,创建一个空文件夹用于存储代码的输出文件。 新建作业 在导航栏选择『自定义作业-自动搜索作业』,进入自动搜索作业的列表页。 点击『新建作业』,进入配置自动搜索作业流程 使用自动搜索作业训练模型 自动搜索作业提供了多种开源框架、搜索算法以及优质的训练资源。
删除模型精调作业 功能介绍 用于删除模型精调作业。 使用说明 本文API支持通过千帆Python SDK、Go SDK、Java SDK 和 Node.js SDK调用,调用流程请参考 SDK安装及使用流程 。
自定义作业简介 自定义作业简介 自定义作业提供高性能的计算环境,用于进行大规模分布式的模型训练及优化。您可以使用不同框架,编写代码进行多轮训练和迭代,将结果输出到BOS对象存储,或者发布模型到模型仓库。 训练方式简介 自定义作业预置的训练环境支持机器学习和深度学习常用的python库。您可以将代码文件和数据集存储在您的BOS对象存储中,并且在编辑自定义作业时从BOS选取这些文件进行训练。
获取模型精调作业列表 接口描述 本接口用于获取模型精调作业列表。 权限说明 调用本文API,需符合以下权限要求,权限介绍及分配,请查看 角色与权限控制列表 、 账号创建与权限分配 。
本模块提供的自动搜索作业,旨在帮助用户实现在各种AI框架以及各种应用场景下的超参搜索需求。用户只需上传数据及代码,指定训练框架、搜索算法以及需要搜索的超参数,即可完成超参搜索任务。 自动搜索作业目前支持以下5种超参搜索算法: 1. 随机搜索 2. 贝叶斯搜索 3. 进化算法 4. 进化-CMAES 5.
获取模型精调作业列表 功能介绍 用于获取模型精调作业列表。 使用说明 本文API支持通过Python SDK、Go SDK、Java SDK 和 Node.js SDK调用,调用流程请参考 SDK安装及使用流程 。