Impala - MapReduce BMR_全托管Hadoop/Spark集群
上传日志文件到HDFS中。
产品简介 - MapReduce BMR_全托管Hadoop/Spark集群
Spark通过拓展内存计算可在海量数据的迭代式计算和交互式计算中提供远快于Hadoop的运算速度。同时，Spark支持SQL请求、流数据处理、机器学习和图表处理，提高开发者效率。 HBase：开源的、非关系型、分布式的列式数据库，为Hadoop提供NoSQL功能。 Hive：允许使用类似于SQL语法进行数据查询，适合数据仓库的分析任务。
Pig - MapReduce BMR_全托管Hadoop/Spark集群
登录控制台，选择“产品服务->MapReduce BMR”，点击“创建集群”，进入集群创建页，并做如下配置： 设置集群名称 设置管理员密码 关闭日志开关 选择镜像版本“BMR 1.0.0(hadoop 2.7)” 选择内置模板“hadoop”。 请保持集群的其他默认配置不变，点击“完成”可在集群列表页可查看已创建的集群，当集群状态由“初始化中”变为“空闲中”时，集群创建成功。
Flink - MapReduce BMR_全托管Hadoop/Spark集群
使用简介 远程登录到创建好的集群中 ssh hdfs@$public_ip 使用创建集群时输入的密码 运行WordCount作业 (未开启Kerberos认证) 先上传一份文件到HDFS中 hdfs dfs -put /etc/hadoop/conf/core-site.xml /tmp 执行如下命令,在Yarn上提交作业作业： flink run --jobmanager yarn-cluster
数据类型 - MapReduce BMR_全托管Hadoop/Spark集群
AdditionalFile数据结构 参数名 参数类型 是否必须 参数描述 remote String 否 远程文件 local String 否 本地文件 作业描述 Streaming作业的properties定义如下： 参数名 参数类型 是否必须 参数描述 input String 是 输入路径 mapper String 是 mapper程序 output String 是 输出路径 arguments
Druid - MapReduce BMR_全托管Hadoop/Spark集群
组件联合使用，如Hadoop、Hive、Spark等。
产品优势 - MapReduce BMR_全托管Hadoop/Spark集群
便捷管理：独创的Hadoop集群管理系统（HMS），提供丰富的集群监控、管理功能。 开放：完全兼容开源Hadoop/Spark社区，零成本业务迁移。 实惠：支持按需付费以及包年包月以及竞价实例，计价简单而透明。 安全：专属私有网络，独占系统环境，确保数据安全。
集群操作接口 - MapReduce BMR_全托管Hadoop/Spark集群
售卖套餐请参考 https://cloud.baidu.com/doc/BMR/s/6jwvxw85z 请求参数 名称 类型 是否必须 参数位置 参数描述 version String 是 URL参数 API版本号，当前取值1 imageType String 是 RequestBody参数 集群类型，比如 hadoop，参考 BMR集群 imageVersion String 是 RequestBody
Sqoop - MapReduce BMR_全托管Hadoop/Spark集群
Sqoop是用来将Hadoop和关系型数据库中的数据相互转移的工具，可通过Hadoop的MapReduce将关系型数据库（MySQL、Oracle、Postgres等）中的数据导入到HDFS中，也可以将HDFS的数据导进到关系型数据库中。实现过程如下： 读取要导入数据的表结构，生成运行类，默认是QueryResult，打成jar包，然后提交给Hadoop。
Kudu - MapReduce BMR_全托管Hadoop/Spark集群
Kudu围绕着Hadoop生态圈设计, 支持多种存取方式如Apache Impala, Apache Spark和MapReduce。 此外，Kudu还有更多优化的特点： OLAP 工作的快速处理。 与 MapReduce，Spark 和其他 Hadoop 生态系统组件集成。
