解决方案实践 > 定时分析日志数据 定时分析日志数据 概览 设计作业 存储日志 启动定时任务 创建集群模板 创建定时任务 读取分析结果 定时分析日志数据 更新时间: 2022-01-10 概览 通过定时任务创建BMR集群,分析日志数据,定时释放集群,为用户大大节约了使用成本。 ## 需求场景 对于业务稳定且有规律的用户,日志的峰值和低谷的规律一般是固定的。
导入数据源 您可直接在左侧导航列中的【数据源】进行数据源导入操作,也可在实例详情页中将数据源导入当前缓存实例。 在数据源页面进行导入 配置项 配置信息 绑定实例 您需要选择已创建完成的缓存实例。一旦创建之后,无法修改数据源所属的缓存实例。 数据来源 您可以选择数据来源为本账号对象存储或其他账号对象存储。若您选择来源为其他账号对象存储,请填写AccessKey与SecretKey。
移除数据源 您可以在导入数据源后,对数据源进行移除。移除数据源会导致已导⼊的数据失效,但不会对对象存储BOS中的数据产生影响。 操作步骤 您可直接在左侧导航列中的【数据源】进行数据源导入操作,也可在实例详情页中将数据源导入当前缓存实例。 在数据源页面进行移除 在数据源列表中选择数据源,点击移除。 点击确认,移除数据源。
使用数据源 当您创建权限组和数据源以后,可以通过 rfsmount 二进制挂载访问数据源数据。 准备工作 使用数据源前,先确认需要在哪些机器上挂载数据源,要求存在匹配 IP 地址的可用权限组,且挂载权限为非禁止。 详情请参见 新建权限组 。 使用数据源 点击左侧导航列【数据源】一栏,选择需要访问的数据源,点击【挂载命令】获取服务访问地址。
操作步骤 按以下步骤在控制台创建元数据同步规则。 进入数据流转页面 在数据湖存储加速工具 RapidFS 控制台左侧导航栏中选择 数据流转 ,进入数据流转列表页,并点击 元数据同步 ,进入元数据同步规则页面。
安装SDK工具包 运行环境 PHP SDK包要求运行环境至少为PHP 5.3.2 版本。 安装步骤 下载最新的 BCE PHP SDK 。
安装SDK工具包 环境准备 运行环境 Python SDK工具包支持在Python 2.7 以上环境运行。 安装pycrypto依赖 安装SDK之前,需要先执行命令 pip install pycrypto 安装pycrypto依赖。
删除元数据同步规则 概述 对于不再使用的元数据同步规则,可发起删除。 注意事项 单次同步规则删除后,此规则下正在执行的元数据同步任务将被取消 周期同步规则删除后,此规则下正在执行的元数据同步任务将被取消 操作步骤 在 RapidFS 控制台左侧导航栏 数据流转 页面,点击 元数据同步 进入元数据同步规则列表页。 选择指定的元数据同步规则,点击 删除规则 。 确认 删除元数据同步规则。
使用数据湖存储加速工具RapidFS 容器引擎CCE支持通过创建PV/PVC,并为工作负载挂载数据卷方式使用百度智能云 数据湖存储加速工具RapidFS 。本文将介绍如何在集群中动态和静态挂载数据湖存储加速工具RapidFS。 使用限制 集群Kubernetes版本需大于或等于1.18。 RapidFS实例需要和集群在同一VPC内。
启停元数据同步任务 概述 元数据同步规则创建完成后,可启动/取消元数据同步任务。 单次同步: 执行任务 为启动一次元数据同步任务, 终止任务 为取消此次元数据同步任务。 周期同步: 启动规则 为启动周期元数据同步(周期执行元数据同步), 禁用规则 为取消周期元数据同步。