简介 本文档主要介绍BMR Python SDK的安装和使用。在使用本文档之前,您需要先了解BMR的一些基本知识,并已经开通了BMR服务。若您还不了解BMR,可以参考 产品描述 和 操作指南 。
概述 本文档主要介绍BMR Java SDK的安装和使用。在使用本文档之前,您需要先了解BMR的一些基本知识,并已经开通了BMR服务。若您还不了解BMR,可以参考 产品描述 和 操作指南 。
有关详细信息,请参阅统一命名空间文档。 智能多层级缓存:Alluxio 集群能够充当底层存储系统中数据的读写缓存。可配置自动优化数据放置策略,以实现跨内存和磁盘(SSD/HDD)的性能和可靠性。缓存对用户是透明的,使用缓冲来保持与持久存储的一致性。有关详细信息,请参阅 缓存功能文档。
通过容器化封装和 Kubernetes 统一调度,平台实现组件间的灵活组合与高效协同,为企业构建现代化、可靠且可扩展的云原生大数据计算环境提供坚实支撑。
单集群节点个数的限制 默认情况下,集群中Master节点实例组的实例个数应为1个,HA模式下为3个;Core实例组的实例个数不得小于2个且不得大于20个,Task实例组的实例个数不得大于20个。
设置序列号 请在网页控制台中申请序列号,并在init初始化前设置。 LinuxSDK 首次使用需联网授权。
基础使用 前提条件 已创建 Hadoop 类型集群,并选择了 Trino 服务,创建集群详情请参见 创建集群 。或者 已创建 Trino 类型集群。 如需使用 EDAP 统一元数据管理,请开通 EDAP 产品使用权限。 元数据管理 Trino支持有两种元数据管理方式,一种是使用 DEFAULT 元数据管理,一种是使用 EDAP 元数据管理。
应用程序参数:输入参数,且参数不做任何修改传给MainClass中的main函数。输入参数时,只需要输入参数本身字符串即可,用空格分隔,无需参数转义和url encode。 Spark作业 作业名称:输入作业名称,长度不可超过255个字符。 应用程序位置:输入JAR包在bos上的地址。
Cluster(集群) 新建cluster 如下代码可以新建一个集群,集群包含1个master节点和2个core节点,且安装了Hive、Pig、HBase应用。请注意:参考下面样例代码时,需要修改log_uri参数指定BOS路径为您的账户可用的BOS路径。
详情请查看 BMR价格计算器 。 计费项 计费项 计费方式 计费规则 存储空间 包年包月 按需计费 费用=单价×存储量×使用时长。 可选机型 包年包月 按需计费 费用=单价×节点个数×使用时长。 集群创建成功后,开始计费。您可以在集群创建过程中提交作业,或者在集群创建成功后及时提交作业。