采集日志到百度云BLS BCI 支持采集容器内的日志文件、标准输出,并推送到BLS(百度云日志服务)。 BCI日志采集架构 上图是BCI日志采集的架构图,如需采集日志,需要创建三类关键对象 存储端:存放用户日志的存储产品,由用户负责创建。目前日志采集支持的存储产品有:BLS日志集、百度云Kafka、BOS、BES。
采集容器日志文件 当日志仅写入容器内部的某个文件时,可以使用本节提供的步骤进行日志持久化。和主机日志文件采集不同的是,容器采集支持根据环境变量进行过滤,例如:添加AIHC_POM = true 环境变量,该传输任务将只作用在拥有此环境变量的容器上。
不同消息通知渠道的使用场景介绍 概述 如果您在实际使用云监控过程中,对于消息通知渠道有不同的场景和需求,可以通过云监控BCM提供的多种方式满足需求。
创建集群配置 该接口用于创建集群配置。 请求结构 POST / v { version } / configs HTTP / 1.1 Host : kafka - api . bj . baidubce . com Authorization : authorization string 请求头域 除公共头域外,无其他特殊头域。 请求参数 参数名称 类型 是否必须 参数位置 描述 version
消息服务for Kafka-专享版 消息服务 for Kafka-专享版包含5种监控对象类型,分别是:服务监控(Broker)、主题监控(Topic)、主机监控(Node)、集群监控(Cluster)、消费组监控(ConsumerGroup),各个类型包含的监控指标列表如下: 服务监控(Broker) 指标英文名称(metric name) 指标中文名称 单位 维度 备注 ActiveControllerCount
在容器引擎控制台配置采集规则 您可以通过在容器引擎CCE控制台创建日志采集规则,通过指定集群中需要采集日志的容器实现对业务日志的采集、存储和查询分析。 使用限制 目前仅支持将采集的日志推送至日志集、BES,暂不支持直接推送至BOS、Kafka;日志源支持采集主机和容器日志,容器日志类型支持标准输出日志、容器内部日志。 前提条件 已成功 创建CCE集群 。
队列(Queue) 存储消息的物理单元,一个主题可以被分为多个队列,分布在不同的Broker上。 生产者(Producer) 负责发送消息到 RocketMQ 服务器的应用程序。 消费者(Consumer) 从 RocketMQ 服务器接收并处理消息的应用程序。 Broker RocketMQ 服务器,负责接收、存储和转发消息。
通过左侧采集配置导航进入采集配置页面后,点击“Service Monitor”选项卡。 若为第一次操作,功能默认禁用,需要点击“立即开启”后启用。
接入成功后,在Prometheus监控页面右侧点击 跳转到Promethrus监控服务 选择您的实例,点击 实例名称 在左侧导航栏中选择 采集配置 ,并在右侧选择 目标集群 ,在下方 采集配置 列表中找到所需要的 任务名称 ,在右侧 操作 中 点击启用 。任务状态由 禁用 转为 启用 。
EFK日志采集系统部署指南 EFK日志采集系统简介 EFK即ElasticSearch+Fluentd+Kibana。通过Fluentd在各个节点进行日志的采集汇聚到ElasticSearch中,由Kibana作前端展示。 Elasticsearch 是一个分布式的搜索和分析引擎,可以用于全文检索、结构化检索和分析,并能将这三者结合起来。