访问集群服务页面 - MapReduce BMR_全托管Hadoop/Spark集群
访问集群服务页面 访问集群Hadoop Yarn服务页面 通过Web UI可访问Hadoop Yarn，具体操作如下： 打开 产品服务>MapReduce>MapReduce-集群列表 ，点击已创建的集群，进入实例详情页面。 点击服务页面栏中的 Hadoop Yarn 对应的链接。 在弹出的认证页面中输入创建集群时设置的用户名和密码即可访问集群服务页面。
定时分析日志数据 - MapReduce BMR_全托管Hadoop/Spark集群
在“集群配置”区，选择镜像版本BMR 1.0.0(hadoop 2.7)，并选择模板“hadoop”。 其他设置可保持默认设置，点击“完成”即可。 点击已创建的集群模板，可查看模板详情如下： 创建定时任务 在“产品服务->MapReduce BMR”页，点击“定时任务”，进入定时任务列表页。 点击“创建定时任务”，在“任务参数”区输入任务名称，并选择已创建的集群模板“timedtask”。
使用Hive分析网站日志 - MapReduce BMR_全托管Hadoop/Spark集群
由于网站每天会产生海量的日志，非常适合使用MapReduce（简称BMR）这样的托管Hadoop服务。同时，BMR集成了Hive和Hue，开发者可在浏览器中与Hadoop集群交互，分析处理数据，完成创建数据集、执行Hive查询等操作，大大降低了使用门槛。
流式应用场景 - MapReduce BMR_全托管Hadoop/Spark集群
spark-submit --master yarn --deploy-mode cluster --files test.conf,client.keystore.jks,client.truststore.jks --jars spark-streaming-kafka-0-10-assembly_2.10-1.6.0.jar kafka_wordcount.py 查看作业输出 在“集群详情页”点开“Hadoop
Hive 操作 Hbase 外部表 - MapReduce BMR_全托管Hadoop/Spark集群
Hive 操作 Hbase 外部表 本示例使用 BMR-2.3.0(Hadoop: 3.1.1, Hive:3.1.0, HBASE: 2.2.7)来演示 Hive 操作 Hbase 外部表。其他版本操作应该类似。 1. 创建 Hbase 表 hbase shell 创建 hbase 表 hbase_hive_table。
不同集群的 Hive 迁移方案 - MapReduce BMR_全托管Hadoop/Spark集群
不同集群的 Hive 迁移方案 不同集群的 Hive 迁移方案 本文档描述了怎样把 Hive 数据库从一个 Hadoop 集群迁移到另一个 Hadoop 集群。 本文档假定新集群的 Hive 元数据库的内容可以清空。 1.
存储数据至HBase - MapReduce BMR_全托管Hadoop/Spark集群
CREATE EXTERNAL TABLE IF NOT EXISTS pagecounts_hbase (rowkey STRING, pageviews STRING, bytes STRING) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' WITH SERDEPROPERTIES ('hbase.columns.mapping
通用说明 - MapReduce BMR_全托管Hadoop/Spark集群
Access Key ID / Secret Access Key：BMR的API服务采用Access Key与请求签名机制。Access Key由Access Key ID和Secret Access Key组成，均为字符串。
错误码 - MapReduce BMR_全托管Hadoop/Spark集群
InvalidVersion The API version specified is invalid. 404 URI的版本号不合法。当前取值为1。 MalformedJSON The JSON provided is not well-formed. 400 JSON格式不合法。
集群指标 - MapReduce BMR_全托管Hadoop/Spark集群
hive_metastore_api_get_table GetTable请求平均时间 ms ComponentId hive_metastore_api_get_table_req GetTableReq请求平均时间 ms ComponentId hive_metastore_api_get_table_objects_by_name_req GetTableObjectsByName请求平均时间
