系统监控
更新时间:2024-10-18
提供资源的使用分析,查看资源的使用趋势,当前资源正在执行哪些作业,帮助用户解决业务问题,数据每5分钟更新一次。
名词解释:
作业:用户通过离线开发、实时开发功能编写的可视化、脚本、Jar包等统称为作业
作业组:多个作业的组合被称为作业组,暂时仅支持离线作业的组合
任务:作业发布后形成可被手动或定时调度的任务
实例:任务每次执行会形成一个实例,实例状态分为成功、失败、暂停等
资源使用情况
统计资源管理中添加的资源,列表中自动展示其资源类型。 支持根据资源类型、资源名称、作业开始时间进行检索,查看不同资源的使用趋势。
若资源类型选择为BMR,统计项为:
- 调度作业数
- CPU使用量
- 内存使用量
- CPU使用率
- 内存使用率
若资源类型选择为资源组,统计项为:
- 调度作业数
- CU数
作业执行列表
统计作业的执行情况,展示作业最新的实例执行状态
序号 | 字段名称 | 字段说明 | 备注 |
---|---|---|---|
1 | 作业名称 | 脚本作业名称 | |
2 | 作业类型 | 支持作业类型包括:Shell、Spark、Python、可视化、HIVE SQL、JDBC SQL、Spark SQL、PySpark、Spark Scala、实时流水线、FlinkSQL作业、Flink自定义作业、SparkStreaming Scala、SparkStreaming。 | |
3 | 实例ID | 任务执行的实例ID | |
4 | 任务名称 | 脚本所属的任务名称 | |
5 | 任务类型 | 任务类型包括:实时作业、离线作业、离线作业组、工作台临时执行作业 | |
6 | 项目名称 | 任务所属项目 | |
7 | 调度时间 | 实例按照调度计划开始时间 | |
8 | 开始时间 | 实例实际开始的时间 | |
9 | 执行时长 | 实例执行耗时 | |
10 | 内存使用率(使用量) | 内存使用情况 | |
11 | CPU 使用率(使用量) | CPU使用情况 |
注:其中内存使用率(使用量)、CPU 使用率(使用量):
- 仅支持Spark SQL、PySpark、Spark Scala、FlinkSQL作业、Flink自定义作业、SparkStreaming Scala、SparkStreaming类型作业展示。
- Shell、Python、可视化、HIVE SQL、JDBC SQL、实时流水线任务不支持展示。