发起数据集导入任务 注意: 为提升开发者使用体验,平台升级了数据集管理接口。推荐使用 数据集管理V2版本 接口,功能更全面、且接口更规范,详见 数据集管理API列表 ;本文内容不再更新,由于V1版本接口后续可能下线停止服务,为避免影响使用,建议接入V2版本接口。 功能介绍 本接口用于发起数据集导入任务。
登录/注册 个人中心 消息中心 退出登录 10 1 千帆 Python SDK 本地导入数据集,进行数据集处理与查看,然后分别导出到本地文件以及千帆平台 大模型开发 / 实践案例 LLM 文心大模型 数据集 2024.08.22 1977 看过 数据集 千帆 Python SDK 支持用户使用 Dataset 类在本地进行数据集的创建、删除、查看等操作,然后使用 DataSource 类,实现数据集的对不同平台的导入导出功能
需具有以下任一权限: 完全控制千帆大模型平台的权限:QianfanFullControlAccessPolicy 完全控制千帆大模型平台数据管理(除数据标注外)的权限:QianfanDataFullControlAccessPolicy 运维操作千帆大模型平台数据管理(除数据标注外)的权限:QianfanDataOperateAccessPolicy 鉴权说明 调用本文API,使用“基于安全认证AK
需具有以下任一权限: 完全控制千帆大模型平台的权限:QianfanFullControlAccessPolicy 运维操作千帆大模型平台数据管理(除数据标注外)的权限:QianfanDataOperateAccessPolicy HTTP调用 鉴权说明 调用本文API,使用“基于安全认证AK/SK”进行签名计算鉴权,即使用安全认证中的Access Key ID 和 Secret Access Key
配置项 配置描述 目的端 AccessKey 填写目的端 AccessKey。您可以点击控制台右上角账号名称的安全中心查看 目的端 SecretKey 填写目的端 SecretKey。
需具有以下任一权限: 完全控制千帆大模型平台的权限:QianfanFullControlAccessPolicy 只读访问千帆大模型平台数据管理(除数据标注外)的权限:QianfanDataReadAccessPolicy HTTP调用 鉴权说明 调用本文API,使用“基于安全认证AK/SK”进行签名计算鉴权,即使用安全认证中的Access Key ID 和 Secret Access Key进行鉴权
导入数据 创建数据集后,在「数据总览」页面中,找到该数据集,点击右侧操作列下的「导入」,即可进入导入数据页面,可以通过以下方式导入数据: 导入未标注的数据,在线进行数据标注 直接导入标注好的数据 不论您上传无标注信息的数据或有标注信息的数据,都需要以下述格式要求进行上传。
创建数据集并导入 创建数据集 在训练模型之前,需要在【数据总览】里面“创建数据集”。需输入数据集名称、选择相应的标注模版、选择数据去重策略,即可创建一个空数据集。 数据自动去重 即平台对您上传的数据进行重复样本的去重。建议创建数据集时选择「数据自动去重」 导入无标注数据 创建数据集后,在「数据总览」页面中,找到该数据集,点击右侧操作列下的「导入」,即可进入导入数据页面。
创建数据集并导入 创建数据集 在训练模型之前,需要先在数据总览【创建数据集】。只需输入数据集名称、选择数据去重策略,即可创建一个空数据集。 数据自动去重 即平台对您上传的数据进行重复样本的去重。建议创建数据集时选择「数据自动去重」 导入数据 创建数据集后,在「数据总览」页面中,找到该数据集,点击右侧操作列下的「导入」,即可进入导入数据页面。
创建数据集并导入 创建数据集 在训练模型之前,需要创建数据集。需输入数据集名称、选择相应的标注模版、选择数据去重策略,即可创建一个空数据集。 数据自动去重 即平台对您上传的数据进行重复样本的去重。建议创建数据集时选择「数据自动去重」 导入数据 创建数据集后,在「数据总览」页面中,找到该数据集,点击右侧操作列下的「导入」,即可进入导入数据页面。