二、元数据 DataBuilder目前支持几种湖格式?分别是什么 目前支持1种,湖格式为Iceberg。 元数据和工作空间是什么关系? 元数据和工作空间是绑定关系,1个Catalog可以绑定到多个工作空间。 三、计算资源 计算资源支持哪几种类型? 目前支持常驻资源,后续会逐步支持Serverless资源。 四、工作流 工作流可以编排哪些类型任务?
存储路径管理 进入 DataBuilder ,单击侧边导航 数据治理>数据湖 进入存储路径管理。 存储路径管理列表 在列表展示已创建的存储路径,可在列表查看存储路径的详细信息。 单击添加按钮创建存储路径,填写相关配置项后单击确定可创建完成。 表一 列表展示项说明 展示项名称 描述 名称 存储路径的名称,创建存储路径时填写的名称。 类型 BOS和HDFS。
WAF数据报表相关接口 WAF查询实例详情 接口描述 查询waf的实例详情,包括waf实例的状态,waf到期时间,以及配置的规则数量,近日web防护和自定义规则拦截的攻击事件的统计。 注意需要指定waf标志符才能正常调用。 请求结构 Plain Text 复制 1 GET /v{version}/wafStatistics/{waf_id}?
是 算子归属的数据目录 catalog 名称 operatorName string 是 算子在元数据中名称 schemaName string 是 算子归属的数据模式 database/schema 名称 version string 是 算子版本 CompoundTask.Operator.OperatorParam 字段名 字段类型 是否必填 字段说明 key string 是 算子参数名
实例组前置检查(数据检查) 接口描述 本接口用于实例组前置检查(数据检查),传入实例instanceId所在地域必须与当前请求的地域保持一致。 本接口为v1接口。
获取下载任务链接 接口描述 获取下载任务状态和链接 权限说明 用户获取 工作空间 下特定工作流 WORKFLOW 特定工作流实例的下载日志连接,需具有以下任一权限 查看工作流的权限: 查看 VIEW 运行工作流的权限: 运行 EXECUTE 编辑工作流的权限:编辑 MODIFY 管理工作流的权限:管理 MANAGE 请
步骤三:任务运维 在数据加工下,可通过运维大屏,查看任务的运行状态,同时对失败的实例进行重新执行。
DataBuilder 为您提供BML节点,方便您通过算法节点载入BML工作流,实现数据在 DataBuilder 、BML间的周期性任务调度。
序列标注数据导入 创建数据集 您可以在BML中,选择“数据管理/标注”并点击按钮“创建数据集”,对话框中选择数据类型为“文本”,标注类型选择“序列标注”,同时您需要根据您的标注数据,选择此序列标注数据集的标注体系(详见文档《序列标注标注说明》)。注意:当前序列标注数据集不支持在线标注功能,您在序列标注数据集中仅能上传标注数据。
导入已标注数据 目录 导入已标注数据方式说明 从已有数据集导入已标注数据 查看已标注数据 导入已标注数据方式说明 如果您已有标注好的数据,支持快速导入到BML,方便直接进入后续训练环节。 实例分割任务向选定的数据集导入已标注好的数据目前支持一种方式: 将其他数据集已经标注好的数据导入 从已有数据集导入已标注数据 从已有数据集导入已标注数据,支持选择数据集及导入的具体标签进行导入。