不支持对特定资源拥有权限的子用户操作队列管理) - 删除队列 - 扩容节点 - 配置扩缩容 节点管理: - 停止调度 - 移出队列 - 移动队列 SERVICE_MODIFY 应用服务资源可操作 应用管理: - 创建空间等变更操作 JOB_SPEC 特定作业资源可读可操作 作业管理: - 仅对当前用户的作业有可读可操作权限 JOB_ALL 所有作业资源可读可操作 作业管理: - 对所有用户的作业都有可读可操作权限
质量作业 数据质量支持按库表配置质量监控规则。 运维管理 在运维管理页面您可以通过库表查看历史校验记录和校验结果详情。 质量报告 数据质量报告页面为您展示库表的规则告警和评分情况。包括: 所选日期的主题/源连接、库得分。 所选日期范围的主题/源连接、库历史得分趋势图。 所选日期的主题/源连接下库得分或库下表得分详情。 配置管理 数据质量配置管理页面您可以对异常数据存储路径进行配置。
CCR:百度CCR镜像环境;OUTERIMAGE:外部镜像;CUSTOM:自定义镜像 + env_image string 训练配置项:镜像、tag + env_image_id string 训练配置项:镜像id + distribute_strategy string 训练配置项:分布式策略,默认返回PaddleFleet + repository_id string 训练配置项:镜像对应在BML
对于程序类脚本作业,支持“手动配置”的方式,补齐血缘。
2.2 根据算法框架的不同,您还需要在发布界面填写响应的额外配置项信息 算法框架 额外配置项 Paddle 无 TensorFlow 模型文件格式:自定义作业支发布 pb 格式的模型文件到模型仓库 Pytorch 从BOS中选择源代码并输入源代码的主文件名 说明: 选取的代码文件必须是当前自定义作业任务对应的代码文件 Sklearn/XGBoost 模型文件格式:支持发布 pickle 格式或 joblib
运行Hive作业 在“产品服务>MapReduce>MapReduce-作业列表”页中,点击“创建作业”,进入创建作业页。 配置Hive作业参数,具体如下: 作业类型:选择“Hive作业” 作业名称:输入作业名称,长度不可超过255个字符。 bos脚本地址:输入 bos://bmr-public-data/apps/hive/AccessLogAnalyzer_bmr_0.2.0.hql 。
运行Pig作业 在“产品服务>MapReduce>MapReduce-作业列表”页中,点击“创建作业”,进入创建作业页。 配置Pig作业参数,具体如下: 作业类型:选择“Pig作业”。 作业名称:输入作业名称,长度不可超过255个字符。 bos脚本地址:可输入样例程序路径 bos://bmr-public-data/apps/pig/AccessLogAnalyzer.pig 。
配置“任务参数”区: 在“任务名称”栏输入任务名称。 在“集群模板”栏选择设置定时任务的集群模板。 配置“执行策略”区: 在“执行频率”栏,可设置间隔的分钟数、小时数和天数。其中,最小间隔不能小于5分钟。 在“任务开始方式”栏,选择“立即开始”则即刻开始执行任务,选择“Y-M-D H:M:S”则指定开始任务的具体时间点。
常见问题总览 故障类问题 作业运行失败怎么办? 作业为什么会运行失败? 作业为什么会提交失败? 集群为什么会自动终止? 配置类问题 如何配置集群,使得作业运行完毕后,集群自动终止? BMR无法手动停止 job,必须等待它运行完吗? 集群是否支持外网登录? Core节点与Task节点的使用区别在哪里,如何选择? 计费类问题 BMR如何进行收费? 费用不足,用户该如何充值?
配置Spark作业参数,具体如下: 作业类型:选择“Spark作业”。 作业名称:输入作业名称,长度不可超过255个字符。