队伍管理 大数据  内容精选
  • 导入Prompt+Image+Response数据 - ModelBuilder

    导入Prompt+Image+Response数据 登录到 千帆ModelBuilder操作台 ,在左侧功能列选择 通用数据集 ,进入主任务界面。 单轮或多轮的图文混合对话数据,支持单图或多图场景。适用于模型精调的SFT图像理解模型训练。 对于Prompt+Image+Response数据,目前 只支持上传已标注的数据

    查看更多>>

  • 数据归档与清理 - 数据库智能驾驶舱 DBSC | 百度智能云文档

    在左侧导航栏,点击 数据开发—>数据归档与清理 。 在 数据归档与清理 页面,单击页面中的 创建归档与清理 。 在 创建归档与清理 页面,按照下表进行配置。 参数 说明 任务名称 输入数据归档任务的名称,为了方便后续查找和管理,请尽量使用有意义的名称。最多支持 64 个字符。 备注 (可选) 输入备注信息,例如针对该数据归档任务的用途描述。

    查看更多>>

队伍管理 大数据  更多内容
  • 如何使用千帆 Python SDK 进行数据清洗 千帆社区

    登录/注册 个人中心 消息中心 退出登录 10 1 如何使用千帆 Python SDK 进行数据清洗 模型开发 / 实践案例 LLM 模型训练 数据集 8月22日 2539 看过 如何在 SDK 中进行数据清洗 千帆 Python SDK 内集成了数据处理的能力。

    查看更多>>

  • 查看数据增强详情 - ModelBuilder

    需具有以下任一权限: 完全控制千帆模型平台的权限:QianfanFullControlAccessPolicy 只读访问千帆模型平台的权限:QianfanReadAccessPolicy 完全控制千帆模型平台数据管理(除数据标注外)的权限:QianfanDataFullControlAccessPolicy 运维操作千帆模型平台数据管理(除数据标注外)的权限:QianfanDataOperateAccessPolicy

    查看更多>>

  • 发起数据集发布任务 - ModelBuilder

    发起数据集发布任务 注意: 为提升开发者使用体验,平台升级了数据管理接口。推荐使用 数据管理V2版本 接口,功能更全面、且接口更规范,详见 数据管理API列表 ;本文内容不再更新,由于V1版本接口后续可能下线停止服务,为避免影响使用,建议接入V2版本接口。 功能介绍 本接口用于发起数据集发布任务。

    查看更多>>

  • 配置数据校验 - 数据传输服务DTS | 百度智能云文档

    配置数据校验 本文介绍如何使用数据传输服务 DTS 配置数据校验任务,帮助您在不停服的情况下对源端和目标端的差异数据进行校验和检查,以便及时发现数据不一致的问题。 前提条件 仅支持对源端和目标端在同地域的迁移任务发起数据校验。 数据传输任务进度为 复制变更 。 说明 建议在任务延迟为 0 秒时进行数据校验,否则可能会出现数据不一致误报情况。

    查看更多>>

  • 数据迁移问题 - 数据传输服务DTS | 百度智能云文档

    增量数据迁移是将源库迁移过程中新增的数据实时同步到目标库中。如果创建数据迁移任务时,同时选择了全量数据迁移和增量数据迁移,则迁移过程中会先将源库中静态数据迁移到目标库,然后将增量数据同步到目标库。 DTS迁移过程中对源数据库是否有影响,是否会删除源库中数据

    查看更多>>

  • 数据校验概述 - 数据传输服务DTS | 百度智能云文档

    数据校验概述 数据传输服务 DTS 提供了数据校验功能,该功能可以在不停服的情况下对源端和目标端的数据差异进行校验和检查,帮助您及时发现数据和结构不一致的问题。 优势 数据校验支持在不停服的情况下进行校验。 数据校验算法采用基于表的 Chunk 进行比对,具备高性能。 数据校验任务支持对源端和目标端全量数据的行级数据进行字段校验。

    查看更多>>

  • MongoDB数据迁移典型实践 - 云数据库 DocDB for MongoDB | 百度智能云文档

    如果创建数据迁移任务时,同时选择了 全量迁移 和 增量同步 ,则迁移过程中会先将源端数据库中存量数据迁移到目标端数据库,然后将增量数据同步到目标端数据库。增量同步迁移不会自动结束,如果需要结束实时同步,您可以在管理控制台根据实际需求手动暂停或是结束该迁移任务。

    查看更多>>

  • 全托管与半托管迁移模式 - 数据流转平台CLOUDFLOW | 百度智能云文档

    当迁移的小文件较多时,可以适当调从agent(worker)配置文件中的rpcRequestMaxTasks、maxConcurrency参数;当迁移的文件较多时,可以根据节点迁移带宽与机器内存,调整MaxBandWidth参数。

    查看更多>>