更新时间:2024-07-02 GMT+08:00
集群启动Yarn后产生大量作业占用资源
问题现象
MRS 2.x及之前版本集群,用户的MRS集群启动Yarn后产生大量作业,占用集群计算资源。
原因分析
集群安全组入口方向的Any协议源地址配置为0.0.0.0/0,导致集群可能遭受了外部网络攻击。
处理步骤
- 登录MRS集群页面,在“现有集群”中,单击对应的集群名称,进入集群详情页面。
- 单击“集群管理页面”后面的“前往 Manager”,弹出“访问MRS Manager页面”。
- 单击“管理安全组规则”,检查安全组规则配置。
- 检查入口方向Any协议的源地址是否为0.0.0.0/0。
如果是,修改入口方向Any协议的远端为指定IP地址。如果不是,则无需修改。
- 修改成功后,重启集群。
建议与总结
关闭入口方向的Any协议,或者指定入口方向的Any协议远端为指定IP。
父主题: 使用Yarn