部分维度查询监控数据 接口描述 可根据多维度、单指标、多统计数据获取云产品指定时间范围内的监控数据。 接口限制 一个实例的任意一个指标一次返回的数据点数目不能超过1440个。 每次查询的维度组合数量不超过100个。
配置管理 针对异常数据的存储路径配置和字段质量评分配置。 操作步骤 登录并进入千帆数据智能平台 DataBuilder。选择侧边导航 数据治理>数据质量>配置管理 。进入配置管理界面 单击 修改 按钮后选择一个存储路径,然后单击保存即修改成功。 字段质量评分配置单击修改按钮修改后单击保存即修改成功。
部分维度查询监控数据 接口描述 可根据多维度、单指标、多统计数据获取云产品指定时间范围内的监控数据。 接口限制 一个实例的任意一个指标一次返回的数据点数目不能超过1440个。 每次查询的维度组合数量不超过100个。
返回参数 参数名称 类型 描述 result Result 获取数据空间表的详情 Result字段数据结构说明 参数名称 类型 描述 data Data List 表详情 totalCount Long 表数量 Data字段数据结构说明 参数名称 类型 描述 indexLength String 索引空间 tableSchema String 数据库名 tableName String 表名 dataLength
这包括但不限于源链接、元数据、存储路径和权限设置。此外,系统还提供实时的申请状态和审核进度更新,以及编辑申请内容的选项,确保用户能够轻松跟踪和管理申请流程。 申请列表 申请记录,查看当前用户申请的源链接、元数据、存储路径权限等申请详情。支持查看申请详情,例如:申请状态、审核状态,支持编辑申请内容。
运行时需要选择一个业务日期,确定本次运行哪天的业务数据。 修数据 针对周期性运行失败的情况,或作业初次上线需要对历史数据进行补充的情况。需要对作业进行修数据操作。修数据任务目前需要配置三个条件: 业务时间范围:用户选择一个时间段,在时间段内作业组会按照调度周期设置,运行相应的实例。
创建迁移任务 CloudFlow 是百度智能云存储推出的数据迁移服务,您可以通过可视化操作发起数据从三方云对象存储到百度智能云对象存储 BOS 的数据迁移。您在迁移前需要创建一个迁移任务,并在任务中填写任务信息、数据源信息、数据目的信息等。 配置项目 配置内容 任务设置 任务名称:名称可以不具备唯一性,长度最大64字符,支持大小英文字母,数字,特殊字符_-。
如果一次将数据插入多个分区,则会显著降低查询的性能 INSERT 。要避免这种情况: 以相当大的批量添加数据,例如一次添加 100,000 行。 在将数据上传到 ClickHouse 之前,按分区键对数据进行分组。 如果出现以下情况,性能不会下降: 数据是实时添加的。 您上传的数据通常按时间排序。 非同步插入数据 可以异步插入少量但频繁的数据。此类插入的数据将组合成批数据,然后安全地插入到表中。
数据转换服务说明书》 客户提供正式数据下载链接 客户根据《数据转换服务说明书》,将数据上传至百度智能云对象存储或者其他云厂商的对象存储,将数据下载链接提交至控制台页面 - 工程师对正式数据进行处理 工程师从百度智能云对象存储下载正式数据,调用对应AI接口进行数据转换,按照《数据转换服务说明书》将转换后的数据做格式处理并上传至百度智能云对象存储,并且设置数据自动删除时间为30天。
借助BOS进行数据迁移 适用场景 无法在百度云与IDC或三方云之间打通网络(如专线等),且需要将本地IDC或三方云的数据上传至PFS中。 操作步骤 第一步:先将本地数据/三方云数据迁移至BOS中,详见: 对象存储BOS数据迁移 第二步:利用BOS工具将数据从BOS迁移至PFS,详见: BOS与PFS之间的数据迁移