BSAM-CLI使用示例 BSAM CLI是一个基于 BCE SAM规范 的命令行工具,它提供了本地开发环境,帮助您在把函数上传到百度智能云CFC之前,在本地进行函数的开发、分析和执行。 工具安装 1.安装Python3.6及以上 2.安装Docker BSAM CLI依赖Docker,所以您需要提前安装并运行Docker服务,关于各个操作系统Docker的安装可以参考 Docker官网 。
日志存储路径 选择预先创建的BOS Bucket; 使用BLS会默认创建一个日志集,也可选择预先创建的日志集。 点击保存。 点击测试,可多次运行您的CFC函数 方法二: 在函数基本信息页面选择编辑信息 ,进入函数信息修改页面。 在设置日志存储 项选择对象存储BOS或日志服务BLS。 日志存储路径 选择预先创建的BOS Bucket;使用BLS会默认创建一个日志集,也可选择预先创建的日志集。
libs/hadoop-mapreduce-examples.jar") .withMainClass("org.apache.hadoop.examples.WordCount") .withArguments("bos://bmr/samples/mapreduce/wordcount/hamlet.txt bos://tester01/out"
HTTP触发器使用示例 用户可以为新建的函数或已有函数配置HTTP触发器,创建函数的流程可以具体参考 创建函数 这里不再赘述。 这里假设用户已完成一个名为httptrigger-helloworld的Nodejs函数的创建,以下内容以此为前提,指引用户在CFC控制台在函数管理页面中为函数配置触发器。接下来,我们将通过三步来完成一个触发器的设置。
打开 产品服务>MapReduce>MapReduce-集群列表 ,点击已创建的集群,进入实例详情页面。 点击服务页面栏中的 Hue 对应的链接。 在弹出的认证页面中输入创建集群时设置的用户名和密码即可访问集群服务页面。
Druid Druid简介 Druid是一个高性能的实时数据分析系统,由MetaMarkets公司在2012开源,专门为OLAP场景而设计。Druid遵从Lambda架构,支持批量和实时两种方式导入数据,并提供高性能的数据查询。 集群准备 Druid模版 登录百度云控制台,选择“产品服务->百度MapReduce BMR”,点击“创建集群”,进入集群创建页。
注意: 本文中所有的数据及示例程序目前只存储在“华北-北京”区域的BOS中,“华南-广州”区域的BOS没有。 对象存储BOS与需要建立的BMR集群应在同一区域内。区域说明请参考 区域选择说明 。
可在“产品服务>MapReduce>MapReduce-定时任务”页中查看已创建的任务。 点击已创建定时任务对应的“查看执行历史”可查看任务执行记录。 (可选)点击“停止”,可暂停该任务,点击“开启”,可重新启动该任务。 修改定时任务 对已创建的定时任务,您可修改时间策略和作业。
Ranger简介 Apache Ranger 是一个为大数据平台提供集中化安全管理的开源框架,专门用于确保 Hadoop 生态系统中的数据安全。以下是 Ranger 的主要组件及其作用。 Ranger Admin(管理服务):是 Ranger 的核心组件,提供了一个图形化用户界面(Web UI),用于集中管理安全策略和用户权限。
一个BCC实例必须关联至少一个安全组。可以从安全组侧取消关联实例,也可以从实例侧取消关联安全组。 安全组侧取消关联实例 选择 产品服务>私有网络VPC ,在左侧导航栏选择 安全组 。 点击 安全组名称 ,进入安全组详情页面。 在关联实例列表操作列,点击 取消关联 按键进行关联。 实例侧取消关联安全组 1.选择 产品服务>云服务器BCC ,进入“实例列表”界面。