MapReduce

百度智能云MapReduce提供全托管的Hadoop/Spark计算集群服务，提供高可靠、高安全性、高性价比的分布式计算服务，涵盖Hadoop、Spark、Hive、Flink、Presto、Druid等多种开源组件，并与百度对象存储服务无缝衔接，助力企业轻松高效地处理海量数据。

产品优势
产品功能
应用场景
产品规格
与自建Hadoop集群对比
客户案例
产品动态
文档与工具
相关产品

新手入门

新手指南MapReduce集群四种节点类型
新手指南Hadoop、Spark、Hive、HBase等MapReduce组件介绍
操作教程MapReduce实践操作教程

产品优势

自动运维

几分钟便可创建集群，全程自动化节点分配、服务部署、性能优化。

动态伸缩

动态调整集群规模，高峰期加大集群规模以提高计算能力，低峰期可对应缩减集群规模降低花费。

数据安全

为集群创建专属私有网络，独占系统环境，确保数据安全。

管理界面

提供可视化管理控制台，方便管理集群、提交任务、监控报警，一目了然。

灵活计价

支持按需付费以及包年包月，计价简单而灵活。

安全可信

支持安全模式启动集群，身份认证、权限管控、审计回溯，全方位保障集群安全。

产品功能

集群管理
集群创建
界面点选的操作方式，多种大数据开源组件自由组合，分钟级完成集群创建操作。
集群扩容
按需进行集群的弹性配置，以及根据业务情况进行节点的扩缩容。
便捷管理
独创的Hadoop集群管理系统（HMS），提供丰富的集群监控、管理功能。
组件丰富
Hadoop
提供可靠存储HDFS以及MapReduce编程范式以便大规模并行处理数据。
Spark
提供基于分布式内存的大规模并行处理框架，提供SQL查询接口、流数据处理以及机器学习。
HBase
大规模分布式NoSQL数据库，提供随机存取大量的非结构化和半结构化的海量数据。
运维中心
集群监控
提供界面化、简单易用的监控运维工具和全面监控策略，支持集群、主机、服务等多种维度实时监控。
作业开发
支持多种简单友好的作业开发方式，全方位加速用户作业开发环节。
诊断分析
提供丰富全面的作业日志及诊断调优建议，对服务性能优化提供依据。

应用场景

日志分析

数据仓储

场景概述

网站日志包含着网站最重要的信息，通过日志分析网站，可帮助您获取用户行为以优化网站的商业价值，而日益增长的日志信息需大规模处理平台的支撑。

我们能提供

将海量日志同步到MapRedue的数据节点后，通过MapReduce全托Hadoop服务高效处理海量网站日志。
根据日志分析场景可视化设置索引字段，SQL语法自由进行日志分析。

产品规格

根据不同场景进行集群类型选择查看更多集群类型

MapReduce 集群

提供可靠存储HDFS以及MapReduce编程范式以便大规模并行处理数据。

集群类型

Hadoop

分布式系统基础架构

轻松高效地处理大规模数据

立即购买

MapReduce 集群

大规模分布式NoSQL数据库，提供随机存取大量的非结构化和半结构化的海量数据。

集群类型

Hbase

运行在Hadoop上的NoSQL数据库

分布式的和可扩展的大数据仓

立即购买

MapReduce 集群

提供托管kafka独立集群模板，支持kafka 1.0.1、1.1.1、2.5.1 多个版本，提供可靠的消息队列服务。

集群类型

Kafka

分布式，多分区，多副本的流处理消息中间件

具备高吞吐量、高可扩展性、可持久化等特性

立即购买

MapReduce与自建Hadoop集群对比

对比维度	百度智能云MapReduce	自建Hadoop集群对比
易用	界面点选的操作方式，多种大数据开源组件自由组合，分钟级完成集群创建操作。	采购服务器，部署Hadoop生态组件，部署时间长。
弹性	创建任意大小的集群并动态调整集群规模，高峰期加大集群规模以提高计算能力，低峰期可对应缩减集群规模降低花费。	计算和存储资源相对固定，不能弹性调整资源
管理	独创的Hadoop集群管理系统（HMS），提供丰富的集群监控、管理功能。	需自行配置多租户管理能力，无法满足企业级需求。
开放	完全兼容开源Hadoop/Spark社区，零成本业务迁移。	开源版本无服务支持，Hadoop发行版，需额外支付License和服务费用。
成本	支持按需付费以及包年包月以及竞价实例，计价简单而透明。	需要预估资源及成本，且资源相对固定，资源使用率低。