勘探开发数据分析系统  内容精选
勘探开发数据分析系统  更多内容
  • 数据增强 - ModelBuilder

    数据增强 什么是数据增强 平台支持对 模型输入的文本数据集 进行数据增强。 当在实践中无法收集到数目庞大的高质量数据时,可以通过数据增强策略,对数据本身进行一定程度的扰动和扩充,从而产生 新 数据。在训练时会通过学习大量的 新 数据,提高模型的泛化能力。 注意文本数据增强功能仅支持增强已发布或未发布的非空数据集 。

    查看更多>>

  • 数据模型 - 云数据库HBase

    数据模型 数据模型 在HBase中,数据存储在具有行和列的表中。这与关系数据库(RDBMS)的术语相似,但是更恰当的方式是将HBase表视为一种多维映射。 相关术语 命名空间(Namespace) 命名空间是一组表(Table)的集合,类似于关系型数据库中的Database概念。这一概念有助于多租户场景下的数据和资源的隔离。 表(Table) 一张HBase表由许多行(row)数据组成。

    查看更多>>

  • 数据清洗 - ModelBuilder

    数据清洗 什么是数据清洗 数据清洗是面向提升大语言模型数据质量的一站式数据处理方案,通过对数据进行异常清洗、文本过滤、文本去重和去除隐私信息,大幅提升数据质量,优化模型训练效果。 面向SFT场景的数据清洗 登录到 操作台 ,在左侧功能列数据洞察与处理中选择SFT数据数据清洗 ,进入数据清洗的主任务界面,整体流程如下: 1.选择数据集 在数据清洗主页面中,选择“创建任务”。

    查看更多>>

  • 数据清洗 - ModelBuilder

    面向post-pretrain场景的数据清洗 登录到 本平台 ,在左侧功能列数据处理中选择 数据清洗 ,进入数据清洗的主任务界面,整体流程如下: 1.选择数据集 在数据处理-数据清洗页面中,选择“创建任务”。 处理前数据集:存放被清洗的泛文本源数据。 处理后数据集:存放清洗后的数据

    查看更多>>

  • 报表AI功能的数据准备 - 百度数据可视化Sugar BI | 百度智能云文档

    4 隐藏不需要被提问的字段 数据模型中有些字段可能并不需要在问数中被分析(如:id),此时可以将字段设置「在分析中隐藏」,减少对大模型的干扰。 5 保证各个字段名称唯一 数据模型中的字段使用中文别名时需要唯一,否则大模型可能会使用相似字段名称进行理解和答复,导致结果不精准。 数据模型准备完毕后,您可选择报表中的图表,进行 AI 功能的操作。

    查看更多>>

  • 导入Prompt+Response数据 - ModelBuilder

    导入Prompt+Response数据 登录到 千帆ModelBuilder操作台 ,在左侧功能列选择 通用数据集 ,进入主任务界面。 数据格式说明 Prompt+Response:单轮或多轮的文本对话数据,提问与回答一一对应,支持系统角色设定。适用于模型精调的SFT大语言模型训练。 无标注样例 # system 为选填字段,代表系统角色设定信息。

    查看更多>>

  • 数据流转平台

    查看更多>>

  • 数据填报管理 - 百度数据可视化Sugar BI | 百度智能云文档

    此外,如果您的数据源下已经存在用于数据存储的数据表,您也可以打开「使用已存在的数据表」,并设置对应的表,系统会自动生成默认的数据填报表单,便于您快速设置。 数据填报的复制 复制数据填报时,由于表字段类型匹配和字段数量多少不一致的问题,是不能够设置「使用已存在的数据表」的。所有的复制都是基于当前数据填报的数据表来生成新的数据表。

    查看更多>>