切换产品类型
您可以点击下拉框切换本产品的不同产品类型,帮助您更高效地阅读文档。
- 最新动态
- 功能总览
- 服务公告
- 产品介绍
- 计费说明
- 快速入门
-
用户指南
- CSS服务权限管理
-
使用Elasticsearch搜索数据
- Elasticsearch使用流程
- Elasticsearch集群规划建议
- 创建Elasticsearch集群(新版)
- 创建Elasticsearch集群(旧版)
- 访问Elasticsearch集群
- 导入数据至Elasticsearch集群
- 使用Elasticsearch集群搜索数据
- 增强Elasticsearch集群搜索能力
- 配置Elasticsearch集群网络
- 备份与恢复Elasticsearch集群数据
- 扩缩容Elasticsearch集群
- 升级Elasticsearch集群版本
- 管理Elasticsearch集群
- 管理Elasticsearch集群索引策略
- Elasticsearch集群监控与日志管理
- 使用搜索大模型实现Elasticsearch AI搜索
- 查看Elasticsearch集群审计日志
- 使用OpenSearch搜索数据
- 使用Logstash迁移数据
- CSS服务资源监控
- 最佳实践
- API参考
- SDK参考
- 场景代码示例
-
常见问题
- 产品咨询
- 计费相关
- CSS集群访问
- CSS集群迁移
-
CSS集群搜索引擎使用
- CSS服务中为什么新创建的索引分片集中分配到单节点上?
- CSS服务中Elasticsearch 7.x集群如何在index下创建type?
- CSS服务中如何配置Elasticsearch索引副本数量?
- CSS服务中Elasticsearch集群分片过多会有哪些影响?
- 如何查看CSS集群的分片数以及副本数?
- CSS服务中Elasticsearch集群的节点node.roles为i表示什么意思?
- CSS服务中如何设置Elasticsearch集群的默认分页返回最大条数?
- CSS服务中如何更新Elasticsearch生命周期策略?
- CSS服务中如何设置Elasticsearch集群慢查询日志的阈值?
- CSS服务中如何清理Elasticsearch索引数据?
- CSS服务中如何清理Elasticsearch缓存?
- 使用delete_by_query命令删除Elasticsearch集群数据后,为什么磁盘使用率反而增加?
- CSS服务的Elasticsearch集群是否支持script dotProduct?
-
CSS集群管理
- 如何查看CSS集群所分布的可用区?
- CSS服务中Filebeat版本与集群版本的关系是什么?
- 如何获取CSS服务的安全证书?
- CSS服务中如何转换CER安全证书的格式?
- CSS服务中Elasticsearch和OpenSearch集群支持修改安全组吗?
- Elasticsearch和OpenSearch集群支持扩容子网吗?
- CSS服务中Elasticsearch集群如何设置search.max_buckets参数?
- CSS服务中如何修改Elasticsearch和OpenSearch集群的TLS算法?
- CSS服务中如何开启Elasticsearch和OpenSearch集群的安全审计日志?
- CSS服务中是否支持停止集群?
- CSS集群冻结索引后如何查询OBS上的索引占用量?
- 如何查看Elasticsearch和OpenSearch集群的系统默认插件列表
- CSS集群备份与恢复
- CSS集群监控与运维
-
故障排除
-
访问集群类
- 无法正常打开Kibana
- Elasticsearch针对filebeat配置调优
- Spring Boot使用Elasticsearch出现Connection reset by peer问题
- 为什么集群创建失败
- Elasticsearch集群出现写入拒绝“Bulk Reject”,如何解决?
- Elasticsearch集群创建index pattern卡住,如何解决?
- 云搜索控制台页面提示系统繁忙
- Elasticsearch集群报错:unassigned shards all indices
- es-head插件连接Elasticsearch集群报跨域错误
- 单节点集群打开Cerebro界面显示告警
- ECS无法连接到集群
- 集群不可用
- 数据导入导出类
-
功能使用类
- 无法备份索引
- 无法使用自定义词库功能
- 快照仓库找不到
- 集群一直处于快照中
- 数据量很大,如何进行快照备份?
- 集群突现load高的故障排查
- 使用ElasticSearch的HLRC(High Level Rest Client)时,报出I/O Reactor STOPPED
- Elasticsearch集群最大堆内存持续过高(超过90%)
- Elasticsearch集群更改规格失败
- 安全集群索引只读状态修改报错
- Elasticsearch集群某一节点分配不到shard
- 集群索引插入数据失败
- CSS创建索引报错“maximum shards open”
- 删除索引报错“403 Forbidden”是什么原因?
- Kibana中删除index pattern报错Forbidden
- 执行命令update-by-query报错“Trying to create too many scroll contexts”
- Elasticsearch集群无法创建pattern
- 端口访问类
-
访问集群类
- 视频帮助
- 文档下载
- 通用参考
链接复制成功!
扩容Elasticsearch集群
当Elasticsearch集群的数据量持续增长或内存占用过高时,集群可能无法有效应对业务负载和性能需求。此时,可以通过横向扩展方式增加节点数量和类型,或纵向扩展方式提升节点的存储容量。
扩容类型 |
适用场景 |
变更流程 |
---|---|---|
增加节点数量 |
当集群的数据量持续增长或内存占用过高时,可以扩容“节点数量”保证集群的可用性。 |
整个扩容过程中,系统会确保每个分片至少保留可用副本,保障服务连续性,不会中断现有业务。 |
增加节点类型 |
当集群本身没有独立的Master节点或Client节点时,随着数据面业务增长,需要动态增加节点类型时,可以选择添加“Master节点”或“Client节点”。 |
|
增加节点存储容量(扩容磁盘) |
|
整个扩容过程中,不会中断现有业务。 |
介绍视频
前提条件
- 确认集群处于“可用”状态,且无正在进行的任务。
- 确认CSS服务有足够的配额支持变更规格,在形态变更页面可以查看当前可用资源。
图1 查看可用资源
计费影响
如果是按需计费的集群,在扩容确认页面可以查看变更后的价格。变更完成后,集群将按照更新后的价格计费,计费规则请参见云搜服务价格计算器。
如果是包周期的集群,在扩容确认页面会触发新的订单,可以查看价格信息。
约束限制
- 集群的节点存储容量只支持扩容不支持缩容,请基于业务量合理选择节点存储容量。
- 包周期集群不支持同时扩容“节点数量”和“节点存储容量”。
- 集群的Master节点和Client节点的存储容量不支持扩容。
- 本地盘类型的数据节点不支持扩容节点存储容量。
- 扩容集群的节点数量时,不同节点类型的取值范围请参见表3。
变更影响
在扩容前,您需要了解以下关键影响和操作建议,以便合理规划变更,最小化业务影响。
扩容节点存储容量(纵向扩展)对业务没有影响,而增加节点数量或增加节点类型(横向扩展)可能产生以下影响:
- 性能影响
扩容节点不会中断业务,但是扩容过程中数据分片需要均衡到新节点以分摊负载。此过程会消耗IO性能,建议在业务低峰期执行。
建议在业务低峰期提高数据迁移速率以缩短任务耗时,并在业务高峰期前降低迁移速率以减轻对集群性能的影响。数据迁移速率由“indices.recovery.max_bytes_per_sec”参数决定,该参数值默认是“CPU核数 x 32MB”(如4核CPU默认128MB)。该参数取值范围为40MB至1000MB,可根据业务需求调整。PUT /_cluster/settings { "transient": { "indices.recovery.max_bytes_per_sec": "1000MB" } }
- 变更过程特性
扩容时长
- 增加节点数量或增加节点类型(横向扩展)的时长预计为10~30分钟,主要和集群本身的调度能力相关。
- 扩容节点存储容量(纵向扩展)的时长预计为10~15分钟。
增加节点数量或节点存储容量
当集群的数据量持续增长或内存占用过高时,可以扩容节点数量或节点存储容量,提升节点的可用性和数据的持久性。
- 登录云搜索服务管理控制台。
- 在左侧导航栏,选择“集群管理 > Elasticsearch”,进入集群列表。
- 选择目标集群,单击操作列的“更多>形态变更”进入更改集群规格页面。
- 选择“更改集群规格”页签。
- 在更改集群规格页面,设置扩容参数。
表3 扩容节点数量和节点存储容量
参数
说明
变更类型
选择“扩容”。
变更的资源
显示本次变更任务增加的资源。
变更的角色
在“节点数量”列和“节点存储”列增加节点数量和节点存储容量。支持多种节点类型同时变更。
- 节点数量的取值范围请参见约束限制。
- 节点存储容量的取值范围由“节点规格”决定,且只支持配置为20的倍数。
说明:
包周期集群不支持同时扩容“节点数量”和“节点存储容量”。
图2 集群扩容 - 单击“下一步”。
- 确认变更信息后,单击“提交申请”。
- 单击“返回集群列表”跳转到集群管理页面。集群的“任务状态”列显示为“扩容”,表示集群正在扩容。当集群状态变为“可用”,则表示扩容成功。
增加节点类型
当集群本身没有独立的Master节点或Client节点时,随着数据面业务增长,需要动态增加节点类型时,可以添加“Master节点”或“Client节点”。
- 登录云搜索服务管理控制台。
- 在左侧导航栏,选择“集群管理 > Elasticsearch”,进入集群列表。
- 选择目标集群,单击操作列的“更多>形态变更”进入形态变更页面。
- 选择“添加Master/Client节点”页签。
当集群同时拥有Master节点和Client节点时,形态变更页面将不存在“添加Master/Client节点”页签。
- 在添加Master/Client节点页面,勾选需要添加的节点,并配置“节点规格”、“节点数量”和“节点存储”。
表4 添加Master或Client节点
参数
说明
启用节点类型
勾选本次要添加的节点类型。
- 只能选择一种节点类型,当需要同时添加Master和Client节点时,就需要执行2次“添加Master/Client节点”任务。
- 当集群本身已经有Master节点或Client节点时,则此处只显示另一种节点类型供选择。
节点规格
根据需求选择节点规格。
节点数量
设置该节点的节点数量,取值范围请参见约束限制。
节点存储
设置该节点的存储类型。Master节点和Client节点的存储容量为40GB,且不支持修改。
图3 添加Master/Client节点 - 单击“下一步”。
- 确认变更信息后,单击“提交申请”。
返回集群列表页面,集群的“任务状态”列中显示为“扩容中”。
- 如果添加Master节点,当“集群状态”变为“可用”时表示节点添加成功。
如果集群版本小于7.x,当“集群状态”变为“可用”时,还需要重启集群的所有数据节点和冷数据节点,使新增节点的配置生效。如果不重启使新增节点配置生效,使用集群时因为上报机制问题可能显示不可用状态(集群业务并未不可用)。重启操作请参见重启Elasticsearch集群。
- 如果添加Client节点,当“集群状态”变为“可用”时表示节点添加成功。可选择是否重启数据节点和冷数据节点,下线数据节点上的Cerebro和Kibana的进程。
- 如果添加Master节点,当“集群状态”变为“可用”时表示节点添加成功。
相关文档
- Elasticsearch集群还支持升级节点规格和云硬盘类型。操作指导请参见变更Elasticsearch集群节点规格。
- 在扩容过程中,如果遇到可用区资源不足时,可以将该可用区下的节点迁移到其他资源充足的可用区,然后再新可用区扩容。操作指导请参见切换Elasticsearch集群可用区。