百度Elasticsearch检索分析服务

Presto Presto简介 Presto是一个分布式SQL查询引擎，用于查询分布在一个或多个不同数据源中的大数据集。Presto通过使用分布式查询，可以快速高效的完成海量数据的查询，并提供了Web UI页面方便用户查看任务查询详情与服务运行状态。 创建集群 登录百度云控制台，选择“产品服务->MapReduce BMR”，点击“创建集群”，进入集群创建页，BMR2.0.0及以上版本已支持 Pr

查看更多>>

Pig Pig简介 本文以分析Web日志统计每天的PV和UV为例，介绍如何在百度智能云平台使用Pig。 Pig是基于Hadoop的大规模数据分析平台，把类SQL的数据分析请求转换为一系列经过优化处理的MapReduce运算。Pig适用于大量的并行进程，因此可处理大规模数据集，而且Pig为复杂的海量数据并行计算提供了一个简单的操作和编程接口，便于写入和维护，可为实现不同的目的创建自己的进程。 Pig

查看更多>>

Zeppelin Zeppelin简介 zeppelin 是一个交互式数据分析工具，可支持spark、sql等数据分析工具（详细介绍，请参考 zeppelin 官网 ）。 本文将介绍如何在zeppelin上链接配置hiveserver2，来介绍zeppelin上sql的基本使用。 集群准备 准备百度智能云环境。 登录控制台（ 百度智能云登录平台 ），选择“产品服务->MapReduce BMR”，

查看更多>>

Impala Impala简介 Impala是Cloudera公司主导开发的MPP架构的查询系统，它提供SQL语义，能够快速的查询存储在HDFS、HBASE中的数据。此外Impala使用与Hive相同的元数据、SQL语法、ODBC驱动。 创建集群 登录百度云控制台，选择“产品服务->MapReduce BMR”，点击“创建集群”，进入集群创建页。BMR2.0.0及以上版本已支持 Impala 组件

查看更多>>

Kudu 1.什么是Kudu Kudu是一个用于结构化数据的开源存储引擎, 它支持低延迟的随机访问, 以及高效的分析存取模式. Kudu使用水平partition和副本技术来将数据分布式化, 每个partition的副本用Raft协议同步, 保证了低平均恢复时间和低长尾延迟. Kudu围绕着Hadoop生态圈设计, 支持多种存取方式如Apache Impala, Apache Spark和MapR

查看更多>>

EIP BMR集群中使用EIP 弹性公网IP EIP (Elastic IP) 作为一个独立的商品为用户提供公网带宽服务。 EIP的主要用途包括： 通过EIP实例，用户可以获取公网带宽服务。 用户可灵活配置EIP实例的计费模式，包括按需按带宽付费、按需按流量付费和包年包月按带宽付费三种。 用户可将EIP实例与任意BCC或BLB实例绑定或解绑，匹配用户的不同业务场景。详见： 弹性公网 EIP BMR

查看更多>>

Trino Trino Trino（即原PrestoSQL）是一个开源的分布式SQL查询引擎，支持联邦查询，可以在一条SQL中直接查询多个不同的数据源，适用于交互式分析查询。 创建Trino集群 登录BMR界面，点击【创建集群】，在集群类型中选择trino镜像，在Trino元数据设置中，有EDAP和DEFAULT两种方式供选择。使用EDAP管理Trino元数据，需要用户已有EDAP产品使用权限。

查看更多>>

日志 概述 BMR Java SDK发布版本中增加了logback作为slf4j的实现，如果用户没有自己的实现可以直接用，如果工程中有其他的如log4j则可以替代。 默认日志 如果用户使用默认的logback，则需要配置logback.xml到classpath中。如果没有这个配置文件，日志级别默认为DEBUG。 %d{HH:mm:ss.SSS} [%thread] %-5level %logge

查看更多>>