更新时间:2025-07-29 GMT+08:00

扩容Logstash集群

当Logstash集群的数据面业务变化,需要动态调整集群节点的数量时,可以扩容Logstash集群。

Logstash集群支持扩容集群的“节点数量”。适用于如下场景:

  • 当需要确保数据的持续可用性时,扩容Logstash集群的节点数量可以增加系统的容错能力。
  • 当现有Logstash节点处理能力达到极限,无法满足日益增长的数据量时,扩容可以提供更多的处理能力,保证数据流的顺畅处理。
  • 当Logstash集群需要执行更复杂的数据处理逻辑,如数据丰富、转换等,扩容可以提供更多的计算资源来处理这些任务 。

扩容流程:按照原节点规格创建新节点,并修改集群配置。

前提条件

  • 确认集群处于“可用”状态,且无正在进行的任务。
  • 确认CSS服务有足够的配额支持变更规格,在形态变更页面可以查看当前可用资源。
    图1 查看可用资源

计费影响

如果是按需计费的集群,在扩容确认页面可以查看变更后的价格。变更完成后,集群将按照更新后的价格计费,计费规则请参见云搜服务价格计算器

如果是包周期的集群,在扩容确认页面会触发新的订单,可以查看价格信息。

变更影响

Logstash集群扩容对业务无影响,但是扩容任务一旦启动就无法中止,直到任务成功或失败才会结束。

扩容时长

扩容时长预计为10~30分钟,主要和集群本身的调度能力相关。

扩容节点数量

  1. 登录云搜索服务管理控制台。
  2. 在左侧菜单栏,选择“集群管理 > Logstash”,进入集群管理页面。
  3. 在集群列表选择目标集群,单击操作列的“更多 > 形态变更”进入形态变更页面。
  4. 在更改集群规格页面,设置扩容参数。
    表1 扩容节点数量

    参数

    说明

    变更类型

    选择“扩容”

    变更的资源

    显示本次变更任务增加的资源。

    变更的角色

    “节点数量”列增加节点数量。

    图2 扩容节点数量
  5. 单击“下一步”
  6. 确认变更信息后,单击“提交申请”
  7. 单击“返回集群列表”跳转到集群管理页面。集群的“任务状态”列显示为“扩容”,表示集群正在扩容。当集群状态变为“可用”,则表示扩容成功。

相关文档

Logstash集群还支持升级节点规格。操作指导请参见变更Logstash集群节点规格