更新时间:2024-09-14 GMT+08:00

Logstash使用流程

表1 Logstash集群的使用流程

任务分类

操作

参考文档

使用

规划集群

在创建Logstash集群前,需要先完成集群规划。规划时,应考虑是否多可用区部署以提高集群的高可用性,合理配置集群的节点数量与规格,以确保集群的稳定性和性能。

Logstash集群规划建议

创建集群

基于集群规划,创建合适的Logstash集群。

创建Logstash集群

配置路由

当Logstash集群与数据源子网位于同一主网卡时,网络自动互通;如果不同,则需在Logstash集群的每个节点上配置指向源数据服务器IP的回程路由。

配置Logstash集群路由

配置Logstash迁移任务

通过Logstash集群的配置中心,可以创建并启动Logstash配置文件,以实现数据从不同数据源到目的端的迁移。

创建Logstash配置文件

启动Logstash迁移任务

运维

扩缩容

CSS服务提供灵活的扩容和缩容功能,支持增加节点数量、升级节点规格,以及随机缩容节点,以动态调整集群资源,适应不同业务需求并优化成本。

扩容Logstash集群

缩容Logstash集群

管理集群

CSS服务提供全面的集群管理功能,包括集群信息查看、标签管理、企业项目绑定、自定义CA证书上传等,旨在帮助用户高效、灵活地管理Logstash集群。

查看Logstash集群信息

设置Logstash集群标签

为Logstash集群绑定企业项目

管理Logstash集群的CA证书

强制重启Logstash集群

删除Logstash集群

监控与日志管理

CSS服务提供全面的监控和日志管理功能,包括集群、节点和Logstash管道监控指标、告警规则配置、日志备份与查看,帮助用户有效监控和分析Logstash集群,确保集群的稳定性。

CES中Logstash集群支持的监控指标

使用CES监控Logstash集群

查询和管理Logstash集群日志

审计日志

通过云审计服务,用户可以记录和查询Logstash集群的关键操作事件,且操作记录在管理控制台保存最近7天,便于后续的审计和回溯。

查看Logstash集群审计日志