更新时间:2023-04-10 GMT+08:00
配置弹性伸缩规则
- 简介
- 创建集群时配置弹性伸缩
创建集群时,弹性伸缩功能可以通过在高级配置参数中进行配置。 - 为已有集群新增弹性伸缩策略
集群创建成功后,可以通过节点组维度或资源池维度对集群内的Task节点组配置相关规则。 - 场景1:单独配置弹性伸缩规则
单独配置弹性伸缩规则场景:需要根据Yarn资源使用情况动态调整节点数,在Yarn可用内存低于20%时扩容5个节点,可用内存高于70%时缩容5个节点。Task节点组最高不超过10个节点,最低不少于1个节点。 - 场景2:单独使用资源计划
当数据量以天为周期有规律的变化,并且希望在数据量变化前提前完成集群的扩缩容,可以使用MRS的资源计划配置在规定时间内按计划调整Task节点数量。 - 场景3:弹性伸缩规则与资源计划叠加使用
假如数据量并非非常平稳,有可能出现超出预期的波动,因此并不能保证固定Task节点范围一定可以满足业务场景,此时需要在资源计划的基础上根据实时负载对Task节点数量进行调整。 - 修改已有弹性伸缩策略
- 删除已有弹性伸缩策略
- 开启或关闭已有弹性伸缩策略
- 查看已有弹性伸缩策略
- 配置自动化脚本
- 配置弹性伸缩指标
父主题: 配置集群