百度Elasticsearch检索分析服务

简介 本文档主要介绍BMR Python SDK的安装和使用。在使用本文档之前，您需要先了解BMR的一些基本知识，并已经开通了BMR服务。若您还不了解BMR，可以参考 产品描述 和 操作指南 。

查看更多>>

Hive Hive简介 本文以分析Web日志统计用户访问次数最多的前5个小时段为例，介绍如何在百度智能云平台使用Hive。MapReduce提供了两种使用Hive的方式： 通过Hue使用Hive，请参考 Hue 。 控制台中提交Hive作业 。 Hive是基于Hadoop的数据仓库工具，提供海量数据的读取、写入、管理和分析，具有易扩展的存储能力和计算能力。不必开发专门的MapReduce应用便可通

查看更多>>

Ranger Ranger简介 Apache Ranger 提供集中式的权限管理框架，可以对Hadoop生态中的HDFS/Hive/YARN 等组件提供细粒度的权限访问控制，并且提供了Web UI页面方便管理员进行操作。 创建集群 BMR1.2.0及以上版本已支持 Ranger 组件集成，购置集群时勾选 Ranger 组件即可, 如下图所示: 访问集群的Ranger Web页面 通过SSH Tun

查看更多>>

Impala Impala简介 Impala是Cloudera公司主导开发的MPP架构的查询系统，它提供SQL语义，能够快速的查询存储在HDFS、HBASE中的数据。此外Impala使用与Hive相同的元数据、SQL语法、ODBC驱动。 创建集群 登录百度云控制台，选择“产品服务->MapReduce BMR”，点击“创建集群”，进入集群创建页。BMR2.0.0及以上版本已支持 Impala 组件

查看更多>>

Ooize 什么是Ooize Oozie是一个用于管理Apache Hadoop作业的工作流调度程序系统。 Oozie Workflow job是由多个Action组成的有向无环图（DAG）。 Oozie Coordinator job是根据时间（频率）和数据可用性触发的可重复执行的Oozie Workflow job（简单讲就是根据时间或数据条件，规划workflow的执行）。 Oozie与Ha

查看更多>>

Sqoop Sqoop简介 本样例场景是：通过Sqoop将RDS上的数据导入Hive，Hive中的数据表的location为BOS路径，Hive数据表的partition为dt（string），根据dt指定日期，区分每一天的导入数据。 Sqoop是用来将Hadoop和关系型数据库中的数据相互转移的工具，可通过Hadoop的MapReduce将关系型数据库（MySQL、Oracle、Postgres

查看更多>>

Presto Presto简介 Presto是一个分布式SQL查询引擎，用于查询分布在一个或多个不同数据源中的大数据集。Presto通过使用分布式查询，可以快速高效的完成海量数据的查询，并提供了Web UI页面方便用户查看任务查询详情与服务运行状态。 创建集群 登录百度云控制台，选择“产品服务->MapReduce BMR”，点击“创建集群”，进入集群创建页，BMR2.0.0及以上版本已支持 Pr

查看更多>>

Pig Pig简介 本文以分析Web日志统计每天的PV和UV为例，介绍如何在百度智能云平台使用Pig。 Pig是基于Hadoop的大规模数据分析平台，把类SQL的数据分析请求转换为一系列经过优化处理的MapReduce运算。Pig适用于大量的并行进程，因此可处理大规模数据集，而且Pig为复杂的海量数据并行计算提供了一个简单的操作和编程接口，便于写入和维护，可为实现不同的目的创建自己的进程。 Pig

查看更多>>