管道管理
更新时间:2024-07-12
前提条件
创建管道
功能入口
登陆百度云Elasticsearch控制台,点击logstash实例,通过logstash名称进入详情页面,点击左侧导航栏的管道管理进入管道列表,点击左上角的“新增管道”按钮进入管道创建页面。
管道配置
- Config配置
输入规则代码,注意如需监听本地端口,请在8700-8800之间选择 进行Config配置,配置示例如下:
- 参数配置
一共包括6个配置项,管道描述非必填,其他5个配置项必填。当所有必选项填完后,点击左下角按钮“保存并部署”或“保存”按钮。
- 管道ID:管道的唯一标识,不可重复。支持1-25个大小写字母、数字、下划线。
- 管道描述:管道的描述信息,支持0-25个中文、字母、数字、下划线”_”或连接符"-"。非必填。
- 管道工作线程:管道的工作线程数量,可根据需求调节数量。
- 管道批处理大小:每个批次处理的最大事件数量。可根据需求调节。
- 管道批处理延迟:当管道批处理大小不满足时,每个批次最大的等待时间。可根据自身实际情况调节。
- 队列类型:用于事件缓冲的排队模型,可选值为 memory(基于内存的内列)或者 persisted(基于磁盘的持久化队列)。
- 部署管道
配置管道完成后,可在创建管道页面点击“保存并部署”按钮,进行管道部署。也可以在管道列表页,点击“部署”按钮,部署已保存未部署的管道任务。点击“部署”按钮,弹窗进行二次确认。
- 查看管道
管道列表页,点击管道ID可进入管道信息详情页面。可查看管道的Config配置和参数配置。
- 修改管道
点击管道列表页的操作栏的“修改”按钮,可进入修改页面。或通过点击管道ID可进入管道信息详情页面,再点击右下角的“修改”按钮进入修改页面。
所有内容均支持修改(但管道ID要求不能重复)。运行中的管道,修改完成后,可以“保存并部署”或“取消”按钮。未运行的管道,修改后,可以“保存并部署”、“保存”或“取消”按钮。
- 停止管道
点击管道列表页的操作列的【停止】按钮,跳出弹窗,点击确认后,停止管道任务运行。正在运行的管道任务会被中断。
- 删除管道
点击管道列表页操作列的【删除】按钮,跳出弹窗,点击确认后,删除管道任务。正在运行的管道任务会被中断。已删除的管道无法恢复。