日志集
更新时间:2024-11-08
概述
日志集是日志数据采集、存储、检索和分析的基本单元,一个日志集通常对应某一个应用/服务(具备类似的日志结构)。还可以使用日志组对日志集进行分组管理!
日志组和日志集列表
- 默认展示全部日志集列表,左侧可切换日志组查看具体日志组下的日志集列表。操作列可快速点击进行日志查询,索引配置,投递管理等
- 日志集监控:点击列表中的日志集用量监控图标右侧展示该日志集的日志索引存储,日志写入流量,日志存储,日志索引流量指标监控数据
日志组管理
- 新增日志组管理能力,使用日志组对日志集进行分组管理,最多支持创建100个。
-
支持日志组的新建,编辑,删除,置顶等操作
说明: 新建并使用日志组采集日志时需要绑定的收集器升级到1.6.0及以后版本,否则会导致无法采集日志(default日志组无影响),可参考帮助文档进行升级
创建日志集
日志集是日志数据的存储单元。用户可以使用采集器Agent或者API方式把日志数据写入到指定的日志集中。最多支持创建200个
- 登录百度智能云官网,点击右上角的“管理控制台”,快速进入控制台界面。
- 选择“产品服务>日志服务BLS”,进入“日志管理->日志集”页面。
-
点击“新建日志集”,弹出新建日志集页面,填写配置信息,包括:
- 名称:设置日志集名称,1-128位字符、数字、英文和符号,符号仅限:_-.。名称创建后不支持修改,并且同一region下名称具有唯一性。
- 选择要绑定的日志组:默认default,可新建日志组进行关联绑定
- 存储周期:支持自定义配置周期1-3650天,和永久保存
- shard配置:每个Shard支持5MB/s数据写入,可配置读写Shard数量来满足自身需求。也可开启自动分裂能力,系统自动根据流量进行分裂!目前公测期间Shard免费,后续进行计费!
- 标签:可绑定标签,对日志集进行分类管理
- 完成配置后点击“确定”,完成日志集的创建。
- 返回到“日志集列表”页面。
日志集详情
日志集详情展示日志集配置详情和shard列表内容,shard列表内容展示了每个shard的状态和创建时间,停止写入时间等内容,可手动修改读写shard数量
说明
- 增加读写shard数量,则下面列表会增加读写shard数量
- 如减少读写shard数量,则下面减少的shard的状态会改成只读状态
- 修改读写shard数量时可能会出现延迟,可点击右侧刷新按钮刷新到最新数据
编辑日志集
点击日志集列表操作列的编辑按钮,用户可以修改已有日志集的存储周期和自动shard分裂能力。
说明
- 修改存储周期并保存后,会立即生效。
- 如果缩短日志集的存储周期,系统会按照新的存储周期,删除超出存储周期范围的日志数据
删除日志集
点击操作中“删除”,出现删除提示框,提示:删除后日志集以及数据内容无法恢复。
使用限制
日志组和日志集存在如下使用限制:
- 日志组(Project):每个accountID下最多支持创建100个项目组,如需更多,请提工单申请。
- 日志集(logStore):每个accountID下最多可以创建200个日志集,如需更多,请提工单申请。
- 日志记录(logRecord):单条日志记录最大是512KB。
- 读写Shard:每个读写Shard支持5MB/s数据写入,可最多配置50个。
- 批处理:每批次最大支持1MB的数据。