新增数据集版本
更新时间:2025-04-16
功能介绍
本接口用于根据数据集ID,为数据集新增版本,不继承历史版本。
调用本接口,同千帆控制台新增数据集版本功能类似,如下图所示。
使用说明
本文API支持通过Python SDK、Go SDK、Java SDK 和 Node.js SDK调用,调用流程请参考SDK安装及使用流程。
权限说明
调用本文API,需符合以下权限要求,权限介绍及分配,请查看角色与权限控制列表、账号创建与权限分配。需具有以下任一权限:
- 完全控制千帆大模型平台的权限:QianfanFullControlAccessPolicy
- 完全控制千帆大模型平台数据管理(除数据标注外)的权限:QianfanDataFullControlAccessPolicy
SDK调用
调用示例
1import os
2from qianfan import resources
3
4# 通过环境变量初始化认证信息
5# 使用安全认证AK/SK调用,替换下列示例中参数,安全认证Access Key替换your_iam_ak,Secret Key替换your_iam_sk,如何获取请查看https://cloud.baidu.com/doc/Reference/s/9jwvz2egb
6os.environ["QIANFAN_ACCESS_KEY"] = "your_iam_ak"
7os.environ["QIANFAN_SECRET_KEY"] = "your_iam_sk"
8
9
10
11resp = resources.console.utils.call_action(
12 # 调用本文API,该参数值为固定值,无需修改;对应API调用文档-请求结构-请求地址的后缀
13 "/v2/dataset",
14 # 调用本文API,该参数值为固定值,无需修改;对应API调用文档-请求参数-Query参数的Action
15 "CreateDatasetVersion",
16 # 请查看本文请求参数说明,根据实际使用选择参数;对应API调用文档-请求参数-Body参数
17 {
18 "datasetId": "dg-xxx",
19 "description": "新版本"
20 }
21)
22
23print(resp.body)
1package main
2
3import (
4 "context"
5 "fmt"
6 "os"
7
8 "github.com/baidubce/bce-qianfan-sdk/go/qianfan"
9)
10
11func main() {
12 // 使用安全认证AK/SK鉴权,通过环境变量初始化;替换下列示例中参数,安全认证Access Key替换your_iam_ak,Secret Key替换your_iam_sk
13 os.Setenv("QIANFAN_ACCESS_KEY", "your_iam_ak")
14 os.Setenv("QIANFAN_SECRET_KEY", "your_iam_sk")
15
16 ca := qianfan.NewConsoleAction()
17
18 res, err := ca.Call(context.TODO(),
19 // 调用本文API,该参数值为固定值,无需修改;对应API调用文档-请求结构-请求地址的后缀
20 "/v2/dataset",
21 // 调用本文API,该参数值为固定值,无需修改;对应API调用文档-请求参数-Query参数的Action
22 "CreateDatasetVersion",
23 // 请查看本文请求参数说明,根据实际使用选择参数;对应API调用文档-请求参数-Body参数
24 map[string]interface{}{
25 "datasetId": "dg-xxx",
26 "description": "新版本",
27 })
28 if err != nil {
29 panic(err)
30 }
31 fmt.Println(string(res.Body))
32
33}
1import com.baidubce.qianfan.Qianfan;
2import com.baidubce.qianfan.model.console.ConsoleResponse;
3import com.baidubce.qianfan.util.CollUtils;
4import com.baidubce.qianfan.util.Json;
5import java.util.Map;
6
7public class Dome {
8 public static void main(String args[]){
9 // 使用安全认证AK/SK鉴权,替换下列示例中参数,安全认证Access Key替换your_iam_ak,Secret Key替换your_iam_sk
10 Qianfan qianfan = new Qianfan("your_iam_ak", "your_iam_sk");
11
12 ConsoleResponse<Map<String, Object>> response = qianfan.console()
13 // 调用本文API,该参数值为固定值,无需修改;对应API调用文档-请求结构-请求地址的后缀
14 .route("/v2/dataset")
15 // 调用本文API,该参数值为固定值,无需修改;对应API调用文档-请求参数-Query参数的Action
16 .action("CreateDatasetVersion")
17 // 需要传入参数的场景,可以自行封装请求类,或者使用Map.of()来构建请求Body
18 // Java 8可以使用SDK提供的CollUtils.mapOf()来替代Map.of()
19 // 请查看本文请求参数说明,根据实际使用选择参数;对应API调用文档-请求参数-Body参数
20 .body(CollUtils.mapOf(
21 "datasetId", "dg-xxx",
22 "description", "新版本"
23 ))
24 .execute();
25
26 System.out.println(Json.serialize(response));
27 }
28}
1import {consoleAction, setEnvVariable} from "@baiducloud/qianfan";
2
3// 使用安全认证AK/SK鉴权,通过环境变量初始化;替换下列示例中参数,安全认证Access Key替换your_iam_ak,Secret Key替换your_iam_sk
4setEnvVariable('QIANFAN_ACCESS_KEY','your_iam_ak');
5setEnvVariable('QIANFAN_SECRET_KEY','your_iam_sk');
6
7async function main() {
8 //base_api_route:调用本文API,该参数值为固定值,无需修改;对应API调用文档-请求结构-请求地址的后缀
9 //action:调用本文API,该参数值为固定值,无需修改;对应API调用文档-请求参数-Query参数的Action
10 //data:请查看本文请求参数说明,根据实际使用选择参数;对应API调用文档-请求参数-Body参数
11 const res = await consoleAction({base_api_route: '/v2/dataset', action: 'CreateDatasetVersion', data: {
12 "datasetId": "dg-xxx",
13 "description": "新版本"
14 }
15 });
16
17 console.log(res);
18}
19
20main();
返回示例
1{
2 "requestId": "1bef3f87-c5b2-4419-936b-50f9884f10d4",
3 "result": {
4 "datasetName": "hello_dataset",
5 "datasetId": "dg-xxx"
6 "versionId": "ds-xxx",
7 "versionNumber": 2,
8 "dataFormat": "PromptResponse",
9 "description": "",
10 "storageType": "BOS",
11 "storagePath": "bos:/xxxx",
12 "creator":"accountName",
13 "createTime": "2024-01-29 15:07:43",
14 },
15}
1{
2 "requestId": "1bef3f87-c5b2-4419-936b-50f9884f10d4",
3 "result": {
4 "datasetName": "hello_dataset",
5 "datasetId": "dg-xxx"
6 "versionId": "ds-xxx",
7 "versionNumber": 2,
8 "dataFormat": "PromptResponse",
9 "description": "",
10 "storageType": "BOS",
11 "storagePath": "bos:/xxxx",
12 "creator":"accountName",
13 "createTime": "2024-01-29 15:07:43",
14 },
15}
1{
2 "requestId": "1bef3f87-c5b2-4419-936b-50f9884f10d4",
3 "result": {
4 "datasetName": "hello_dataset",
5 "datasetId": "dg-xxx"
6 "versionId": "ds-xxx",
7 "versionNumber": 2,
8 "dataFormat": "PromptResponse",
9 "description": "",
10 "storageType": "BOS",
11 "storagePath": "bos:/xxxx",
12 "creator":"accountName",
13 "createTime": "2024-01-29 15:07:43",
14 },
15}
1{
2 requestId: '1bef3f87-c5b2-4419-936b-50f9884f10d4',
3 result: {
4 datasetName: 'hello_dataset',
5 datasetId: 'dg-xxx',
6 versionId: 'ds-xxx',
7 versionNumber: 2,
8 dataFormat: 'PromptResponse',
9 description: '',
10 storageType: 'BOS',
11 storagePath: 'bos:/xxxx',
12 creator:'accountName',
13 createTime: '2024-01-29 15:07:43'
14 },
15}
请求参数
名称 | 类型 | 必填 | 描述 |
---|---|---|---|
datasetId | string | 是 | 数据集ID,示例:dg-xxx,说明:通过调用创建数据集接口,返回的datasetId字段获取 |
description | string | 否 | 版本描述 |
返回参数
名称 | 类型 | 描述 |
---|---|---|
requestId | string | 请求ID |
result | object | 请求结果,请求成功时返回 |
code | string | 错误码,错误时返回 |
message | string | 错误信息,请求失败时返回 |
result说明
名称 | 类型 | 描述 |
---|---|---|
datasetId | string | 数据集ID |
versionId | string | 数据集版本ID |
versionNumber | int | 数据集版本序号 |
datasetName | string | 数据集名称 |
dataFormat | string | 数据格式,可选值如下: · PromptResponse:表示Prompt+Response · Role:表示Role(user+assistant) · SFT_FIM:表示Prefix+Suffix+Middle数据格式 · Text:表示纯文本 · DPO_PromptChosenRejected:表示DPO或SimPO数据格式 · KTO_PromptChosenRejected:表示KTO数据格式 · PromptSortedresponses:表示Prompt+多Response排序 · Prompt:表示Prompt集 · PromptImage:表示Prompt+图片 · PromptImageResponse:表示Prompt+Image+Response |
description | string | 版本描述 |
storageType | string | 存储类型,说明: · BOS:表示对象存储BOS · sysStorage:表示平台共享存储 |
storagePath | string | 存储类型为对象存储BOS时,对应的完整存储路径 |
creator | string | 创建人 |
createTime | string | 创建时间,格式:YYYY-MM-DD hh:mm:ss |