创建Logstash集群(新版)
CSS服务的Logstash集群适用于需要高效收集、解析、处理和传输大规模数据,如实时日志分析、数据集成与转换、跨系统数据流转等,以支持企业进行数据监控、告警及后续的深度分析与可视化。
创建Logstash集群有2种方式:
- 方式一:通过云搜索服务管理控制台创建Logstash集群,详细操作请参考本章节内容。本文提供了默认页面(即新版页面)的操作指导,旧版页面的操作指导请参见创建Logstash集群(旧版)。
为了提升创建集群的效率,CSS对创建页面进行了一系列的易用性改进。现推出新版页面,旨在简化操作流程并增强界面的直观性。
- 方式二:通过云搜索服务提供的API接口创建Logstash集群,详细操作请参见创建集群。
前提条件
- 在创建Logstash集群之前,需确保已参考Logstash集群规划建议完成待创建的集群规划,包括集群规模、节点配置、存储容量等方面的规划。
- 已申请虚拟私有云VPC、子网和安全组,您也可以在创建集群的过程中申请。VPC、子网、安全组的详细操作请参见虚拟私有云用户指南。
进入创建集群页面
- 登录云搜索服务管理控制台。
- 在左侧导航栏,选择“集群管理 > Logstash”。
- 在集群列表右上角,单击“创建集群”,默认进入新版创建页面。
图1 新版创建页面
集群配置
选择集群类型和版本。
参数 |
说明 |
---|---|
集群类型 |
选择“Logstash”。 |
集群版本 |
选择所需的集群版本,支持的版本以界面可选项为准。 |
基础配置
选择集群的区域、可用区和计费模式。
参数 |
说明 |
---|---|
当前区域 |
选择集群的所在区域。区域指集群的物理数据中心所在的位置,不同区域的云服务产品之间内网互不相通。建议就近选择靠近您业务的区域,可减少网络时延,提高访问速度。 |
可用区 |
选择集群工作区域下关联的可用区。可用区指在同一区域下,电力、网络隔离的物理区域,可用区之间内网互通,不同可用区之间物理隔离。 最多支持配置2个“可用区”,多可用区的使用建议请参见多可用区部署建议。 |
计费模式 |
选择集群的计费模式,集群支持包年/包月和按需计费两种模式。
|
Logstash节点配置
配置集群的Logstash节点。
参数 |
说明 |
---|---|
CPU架构 |
选择Logstash节点的CPU架构。支持“X86计算”和“鲲鹏计算”,具体支持的类型由实际区域环境决定。 |
节点规格 |
选择Logstash节点的规格。单击“选择节点规格”,在弹窗中选择合适的规格。 Logstash节点只支持云硬盘的规格类型。各个规格的详细说明请参见实例类型。 规格列表的“vCPUs | 内存”呈现了规格的CPU核数和内存,“建议存储范围”呈现了该规格支持的存储容量。 不同区域支持的节点规格不同,请以实际环境为准。 |
节点存储类型和容量 |
选择Logstash节点的存储类型和容量。
|
节点数量 |
设置集群中的Logstash节点个数。 Logstash节点数量和数据迁移速率相关,建议根据业务需求合理选择节点数量。 取值范围:1~100 |
网络配置
配置集群的虚拟私有云VPC、子网、IP地址和安全组。
参数 |
说明 |
---|---|
虚拟私有云 |
指定集群使用的虚拟专用网络,可以对不同业务进行网络隔离。 选择合适的VPC,CSS服务支持使用共享VPC创建集群,当可选的虚拟私有云名称中带有“共享VPC”时,表示这是共享VPC。使用共享VPC创建集群时,共享资源的权限必须包含“default vpc subnet statement”权限。 通过共享VPC功能,可以简化网络配置,帮助您统一配置和运维多个账号下的资源,有助于提升资源的管控效率,降低运维成本。有关共享VPC的更多信息,请参见共享VPC。 如果没有合适的VPC,可以单击“创建虚拟私有云”,跳转到网络控制台新建VPC(必须具备创建VPC的权限)。具体操作请参见创建虚拟私有云和子网。 |
子网 |
指定集群使用的子网,通过子网提供与其他网络隔离的、可以独享的网络资源,以提高网络安全。 选择当前虚拟私有云下的子网。支持选择共享VPC下的子网,即由VPC的所有者将VPC内的子网共享给当前账号,由当前账号在创建集群时选择共享VPC子网。 |
IPv4地址 |
分配集群节点的IPv4地址。
默认值:“自动分配IPv4地址” |
安全组 |
指定集群使用的安全组,安全组起着虚拟防火墙的作用,为集群提供安全的网络访问控制策略。 选择合适的安全组,单击“查看安全组”可以跳转到安全组列表,了解安全组详情。 所选安全组的入方向规则中,“协议端口”必须包含9600的端口范围,否则外部业务访问可能会异常。 如果没有合适的安全组,可以单击“创建安全组”,跳转到网络控制台创建安全组(必须具备创建VPC的权限)。具体操作请参见创建安全组。 |
集群管理配置
参数 |
说明 |
---|---|
集群名称 |
自定义集群名称。 集群名称在4位到32位之间,必须以字母开头,可以包含字母、数字、中划线或者下划线,不能包含其他的特殊字符。 |
添加描述 |
为集群添加描述,方便用户识别。 单击“添加描述”,输入集群的描述信息,支持0~128位。 |
企业项目 |
给集群绑定一个企业项目。 企业项目是一种云资源管理方式,企业项目管理服务提供统一的云资源按项目管理,以及项目内的资源管理、成员管理,默认项目为“default”。 如果开通了“企业项目”,请从下拉列表中选择所在的企业项目。单击查看项目管理,可以跳转到企业项目管理列表,查看企业项目详情。更多关于企业项目的信息,请参见进入企业中心。 |
标签 |
为集群添加标签,方便用户识别和管理拥有的集群资源。 单击“添加新标签”,支持在下拉框中选择已有的标签键和标签值,也可以直接输入新的标签键和标签值。 如果您需要使用同一标签标识多种云资源,即所有服务均可在标签输入框下拉选择同一标签,建议在TMS中创建预定义标签,请参见预定义标签。 每个集群最多可以设置20个标签。 当您的组织已经设定云搜索服务的相关标签策略,则需按照标签策略规则为集群添加标签。标签如果不符合标签策略的规则,则可能会导致集群创建失败,请联系组织管理员了解标签策略详情。 |
购买量配置
参数 |
说明 |
---|---|
购买时长 |
设置集群的购买时长,最短为1个月,最长为3年。如果购买时长超过9个月,建议包年购买,价格更优惠。 |
自动续费 |
选择是否自动续费。默认不启用,如需启用,则勾选“自动续费”选项。 自动续费指在“包年/包月”资源到期后,可以自动进行续费。
关于自动续费的更多说明,请参见自动续费规则说明。 |
提交创建任务
相关文档
- 如果您需要查看集群的基本信息,例如集群状态、内网访问地址、节点信息等,请参见查看Logstash集群信息。
- 如果您需要创建Logstash配置文件定义数据传输规则,请参见创建Logstash配置文件。