更新时间:2025-09-04 GMT+08:00
分享

创建Logstash集群(新版)

CSS服务的Logstash集群适用于需要高效收集、解析、处理和传输大规模数据,如实时日志分析、数据集成与转换、跨系统数据流转等,以支持企业进行数据监控、告警及后续的深度分析与可视化。

创建Logstash集群有2种方式:

  • 方式一:通过云搜索服务管理控制台创建Logstash集群,详细操作请参考本章节内容。本文提供了默认页面(即新版页面)的操作指导,旧版页面的操作指导请参见创建Logstash集群(旧版)

    为了提升创建集群的效率,CSS对创建页面进行了一系列的易用性改进。现推出新版页面,旨在简化操作流程并增强界面的直观性。

  • 方式二:通过云搜索服务提供的API接口创建Logstash集群,详细操作请参见创建集群

前提条件

  • 在创建Logstash集群之前,需确保已参考Logstash集群规划建议完成待创建的集群规划,包括集群规模、节点配置、存储容量等方面的规划。
  • 已申请虚拟私有云VPC、子网和安全组,您也可以在创建集群的过程中申请。VPC、子网、安全组的详细操作请参见虚拟私有云用户指南

进入创建集群页面

  1. 登录云搜索服务管理控制台
  2. 在左侧导航栏,选择“集群管理 > Logstash”
  3. 在集群列表右上角,单击创建集群,默认进入新版创建页面。
    图1 新版创建页面

集群配置

选择集群类型和版本。

表1 集群配置

参数

说明

集群类型

选择“Logstash”

集群版本

选择所需的集群版本,支持的版本以界面可选项为准。

基础配置

选择集群的区域、可用区和计费模式。

表2 基础配置

参数

说明

当前区域

选择集群的所在区域。区域指集群的物理数据中心所在的位置,不同区域的云服务产品之间内网互不相通。建议就近选择靠近您业务的区域,可减少网络时延,提高访问速度。

可用区

选择集群工作区域下关联的可用区。可用区指在同一区域下,电力、网络隔离的物理区域,可用区之间内网互通,不同可用区之间物理隔离。

最多支持配置2个“可用区”,多可用区的使用建议请参见多可用区部署建议

计费模式

选择集群的计费模式,集群支持包年/包月和按需计费两种模式。

  • 包年/包月:预付费模式,按照订单的购买周期结算。

    适用于可预估资源使用周期的业务场景,价格比按需计费模式更优惠。对于长期使用者,推荐该方式。更多请参见包年/包月

    购买后如果不再使用,不能直接删除,需进行资源退订。

  • 按需计费:后付费模式,按照集群实际使用时长计费,计费周期为一小时,不足一小时按一小时计费。

    适用于需要持续运行且具有短期性、突发增长的业务场景。

    可以随时开通,随时删除。

Logstash节点配置

配置集群的Logstash节点。

表3 Logstash节点配置

参数

说明

CPU架构

选择Logstash节点的CPU架构。支持“X86计算”“鲲鹏计算”,具体支持的类型由实际区域环境决定。

节点规格

选择Logstash节点的规格。单击“选择节点规格”,在弹窗中选择合适的规格。

Logstash节点只支持云硬盘的规格类型。各个规格的详细说明请参见实例类型

规格列表的“vCPUs | 内存”呈现了规格的CPU核数和内存,“建议存储范围”呈现了该规格支持的存储容量。

不同区域支持的节点规格不同,请以实际环境为准。

节点存储类型和容量

选择Logstash节点的存储类型和容量。

  • 选择云硬盘类型,不同区域支持的云硬盘类型不同,请以实际环境为准。如果想了解云硬盘的性能,请参见磁盘类型及性能介绍
  • 节点存储容量为固定值:40GB

节点数量

设置集群中的Logstash节点个数。

Logstash节点数量和数据迁移速率相关,建议根据业务需求合理选择节点数量。

取值范围:1~100

网络配置

配置集群的虚拟私有云VPC、子网、IP地址和安全组。

表4 网络配置

参数

说明

虚拟私有云

指定集群使用的虚拟专用网络,可以对不同业务进行网络隔离。

选择合适的VPC,CSS服务支持使用共享VPC创建集群,当可选的虚拟私有云名称中带有“共享VPC”时,表示这是共享VPC。使用共享VPC创建集群时,共享资源的权限必须包含“default vpc subnet statement”权限。

通过共享VPC功能,可以简化网络配置,帮助您统一配置和运维多个账号下的资源,有助于提升资源的管控效率,降低运维成本。有关共享VPC的更多信息,请参见共享VPC

如果没有合适的VPC,可以单击“创建虚拟私有云”,跳转到网络控制台新建VPC(必须具备创建VPC的权限)。具体操作请参见创建虚拟私有云和子网

子网

指定集群使用的子网,通过子网提供与其他网络隔离的、可以独享的网络资源,以提高网络安全。

选择当前虚拟私有云下的子网。支持选择共享VPC下的子网,即由VPC的所有者将VPC内的子网共享给当前账号,由当前账号在创建集群时选择共享VPC子网。

IPv4地址

分配集群节点的IPv4地址。

  • “自动分配IPv4地址”:系统自动为集群节点分配私有IPv4地址。
  • “手动分配IPv4地址”:为集群节点设置指定的私有IPv4地址。设置前,可单击“查看已使用IP地址”查看地址,避免IP地址冲突。

    当指定的IP地址个数小于集群总节点数时,剩余节点将会被系统随机分配私有IPv4地址。

默认值:“自动分配IPv4地址”

安全组

指定集群使用的安全组,安全组起着虚拟防火墙的作用,为集群提供安全的网络访问控制策略。

选择合适的安全组,单击“查看安全组”可以跳转到安全组列表,了解安全组详情。

所选安全组的入方向规则中,“协议端口”必须包含9600的端口范围,否则外部业务访问可能会异常。

如果没有合适的安全组,可以单击“创建安全组”,跳转到网络控制台创建安全组(必须具备创建VPC的权限)。具体操作请参见创建安全组

集群管理配置

配置集群名称、企业项目等信息。
表5 集群管理

参数

说明

集群名称

自定义集群名称。

集群名称在4位到32位之间,必须以字母开头,可以包含字母、数字、中划线或者下划线,不能包含其他的特殊字符。

添加描述

为集群添加描述,方便用户识别。

单击“添加描述”,输入集群的描述信息,支持0~128位。

企业项目

给集群绑定一个企业项目。

企业项目是一种云资源管理方式,企业项目管理服务提供统一的云资源按项目管理,以及项目内的资源管理、成员管理,默认项目为“default”

如果开通了“企业项目”,请从下拉列表中选择所在的企业项目。单击查看项目管理,可以跳转到企业项目管理列表,查看企业项目详情。更多关于企业项目的信息,请参见进入企业中心

标签

为集群添加标签,方便用户识别和管理拥有的集群资源。

单击“添加新标签”,支持在下拉框中选择已有的标签键和标签值,也可以直接输入新的标签键和标签值。

如果您需要使用同一标签标识多种云资源,即所有服务均可在标签输入框下拉选择同一标签,建议在TMS中创建预定义标签,请参见预定义标签

每个集群最多可以设置20个标签。

当您的组织已经设定云搜索服务的相关标签策略,则需按照标签策略规则为集群添加标签。标签如果不符合标签策略的规则,则可能会导致集群创建失败,请联系组织管理员了解标签策略详情。

购买量配置

配置集群包周期的购买时长和续费规则。仅“计费模式”选择“包年/包月”时才显示该参数。
表6 配置购买量

参数

说明

购买时长

设置集群的购买时长,最短为1个月,最长为3年。如果购买时长超过9个月,建议包年购买,价格更优惠。

自动续费

选择是否自动续费。默认不启用,如需启用,则勾选“自动续费”选项。

自动续费指在“包年/包月”资源到期后,可以自动进行续费。

  • 按月购买的资源:每次续费1个月,次数不限。
  • 按年购买的资源:每次续费1年,次数不限。

关于自动续费的更多说明,请参见自动续费规则说明

提交创建任务

  1. 在页面右侧的“配置概要”中,查看集群配置详情。

    未设置的必选字段会通过红色字体进行提示,需在参数配置区域进行设置。

  2. 单击“立即创建”,开始创建集群。

    集群创建时间取决于节点数量,通常可在60分钟内完成,如果集群节点数量较多,时间可能相应延长。

  3. 返回集群列表,查看新建的集群。

    当集群创建成功后,“集群状态”会变为可用

相关文档

相关文档