实现作业组的可视化编排,并配置调度,实现离线作业组的周期性运行。 作业批量导入导出 仅支持顶级【任务开发】目录下的文件夹/作业的导入导出(涵盖可视化、脚本、作业组)。
Vhost(虚拟主机) 不同的用户通过使用不通的虚拟主机,能够做到权限的隔离。在虚拟主机内,用户可以创建Exchange,Queue等。 Connection(连接) 代理服务器与客户端之间建立的TCP连接,代理服务器保证不会主动关闭连接,除非出现网络错误或者服务出现问题。 Channel(通道) Connection的逻辑概念,只有通过Channel才能执行AMQP命令。
价格详情 预置模型调参+自定义作业 在预置模型调参,自定义作业两种建模方式任务配置过程中,您可以选择运行环境及节点数。目前自定义作业暂时只支持单节点。
8 全局优化 脚本调参、Notebook、自定义作业、模型、模型版本均支持修改名称与描述 2020年12月 序号 功能模块 功能描述 1 脚本调参 优化运行中任务提醒,任务配置中选择数据集增加标注状态等 2 脚本调参 支持自动发布模型到模型仓库 3 脚本调参 优化任务配置顺序 2020年11月 EasyDL专业版升级为全功能AI开发平台BML。
数据源配置组件,源端&目的端、取数据模式可视化配置。 可视化拖拽式,拖拽式建立数据集成流水线。 传输管理,同步并发数控制等。 数据管理 数据湖存储管理:支持接入并管理BOS、HDFS等数据湖存储location。 数据源链接管理:支持管理DB、MPP数仓、Nosql等数据源链接。 元数据管理:基于物理表、映射表管理各类型数据源系统数据进行统一元数据管理,数据高效查找。
配置Streaming作业参数: 作业类型:选择“Streaming作业”; 作业名称:输入作业名称,长度不可超过255个字符; Mapper:若使用您自己的代码,请上传程序至BOS或者您本地的HDFS中,并在此输入程序路径;您也可直接使用百度智能云提供的样例程序,路径如下: 华北-北京区域的BMR集群对应的样例程序路径: bos://bmr-public-bj/sample/streaming-1.0
JobProperties :作业配置详情,是一个 Json 格式字符串。 { partitions : * , // 指定导入的分区列表,* 表示未指定。 columnToColumnExpr : , // 列映射和转换关系。空表示未指定。 maxBatchIntervalS : 10 , // 子任务最大运行时长,单位秒。
计费示例 假设一个作业使用了两个CU,单CU配置是1核4G,作业共运行了24分钟30秒,计费按25分钟计算。 总费用为: ( 1 ∗ 0.0033 + 4 ∗ 0.0008 ) ∗ 2 ∗ 25 = 0.325 元
在“作业设置”区,点击“添加作业”,做如下配置: 作业类型:选择“java作业”。 作业名称:输入“timedtaskjob”。
在“作业设置”区,点击“添加作业”,做如下配置: 作业类型:选择“java作业”。 作业名称:输入“timedtaskjob”。