百度Elasticsearch检索分析服务

Hive Hive简介 本文以分析Web日志统计用户访问次数最多的前5个小时段为例，介绍如何在百度智能云平台使用Hive。MapReduce提供了两种使用Hive的方式： 通过Hue使用Hive，请参考 Hue 。 控制台中提交Hive作业 。 Hive是基于Hadoop的数据仓库工具，提供海量数据的读取、写入、管理和分析，具有易扩展的存储能力和计算能力。不必开发专门的MapReduce应用便可通

查看更多>>

Hue Hue简介 本文以网站日志分析来介绍可Web访问的Hue服务。开发者可以在Web界面中通过SQL语句就能分析海量日志，大大降低了使用门槛。 Hue为Hadoop数据分析提供了图形界面系统，仅使用浏览器便能够在Hadoop平台上导入数据、处理数据以及分析数据。 Hue 3.10.0使用 创建集群 准备数据，请参考 数据准备 。 准备百度智能云环境 。 登录控制台，选择“产品服务->MapRe

查看更多>>

日志 概述 BMR Java SDK发布版本中增加了logback作为slf4j的实现，如果用户没有自己的实现可以直接用，如果工程中有其他的如log4j则可以替代。 默认日志 如果用户使用默认的logback，则需要配置logback.xml到classpath中。如果没有这个配置文件，日志级别默认为DEBUG。 %d{HH:mm:ss.SSS} [%thread] %-5level %logge

查看更多>>

Sqoop Sqoop简介 本样例场景是：通过Sqoop将RDS上的数据导入Hive，Hive中的数据表的location为BOS路径，Hive数据表的partition为dt（string），根据dt指定日期，区分每一天的导入数据。 Sqoop是用来将Hadoop和关系型数据库中的数据相互转移的工具，可通过Hadoop的MapReduce将关系型数据库（MySQL、Oracle、Postgres

查看更多>>

Zeppelin Zeppelin简介 zeppelin 是一个交互式数据分析工具，可支持spark、sql等数据分析工具（详细介绍，请参考 zeppelin 官网 ）。 本文将介绍如何在zeppelin上链接配置hiveserver2，来介绍zeppelin上sql的基本使用。 集群准备 准备百度智能云环境。 登录控制台（ 百度智能云登录平台 ），选择“产品服务->MapReduce BMR”，

查看更多>>

Pig Pig简介 本文以分析Web日志统计每天的PV和UV为例，介绍如何在百度智能云平台使用Pig。 Pig是基于Hadoop的大规模数据分析平台，把类SQL的数据分析请求转换为一系列经过优化处理的MapReduce运算。Pig适用于大量的并行进程，因此可处理大规模数据集，而且Pig为复杂的海量数据并行计算提供了一个简单的操作和编程接口，便于写入和维护，可为实现不同的目的创建自己的进程。 Pig

查看更多>>

Spark Spark简介 本文以分析Web日志统计每天的PV和UV为例，介绍如何在百度智能云平台使用Spark。 Spark是开源的大规模数据处理引擎。Spark的先进的DAG执行引擎支持周期性数据流和内存计算，在内存中的运算速度是MapReduce的100倍以上，在硬盘中的运算速度是MapReduce的10倍以上。Spark提供了Java、Scala、Python和R语言的高水平API，同时S

查看更多>>

这是因为 ClickHouse 根据目标表中的类型自动进行类型转换。

查看更多>>