ALM-12062 OMS参数配置同集群规模不匹配

告警解释

系统每一个小时，整点检查一次OMS参数配置和集群规模是否匹配，如果检查OMS配置的参数不足以支撑当前的集群规模，系统将发送此告警。待用户修改OMS参数配置，该告警会自动清除。

告警属性

告警参数

对系统的影响

如果当前集群配置的参数小于集群规模要求的配置标准时，可能会导致用户作业运行延迟，服务页面响应缓慢等问题。严重时会导致集群节点Agent或者OMS进程运行异常，导致组件作业提交、OMS数据同步等失败。

可能原因

OMS配置同集群规模不匹配。

处理步骤

检查OMS配置同集群规模是否匹配。

1. 打开FusionInsight Manager页面，在告警列表中，单击此告警所在行的，查看该告警的主机地址。
2. 以root用户登录告警所在主机。

3. 执行命令su - omm，切换到omm用户。
4. 执行命令vi $BIGDATA_LOG_HOME/controller/scriptlog/modify_manager_param.log打开对应日志，搜索日志“Current oms configurations can not support xx nodes”，其中xx为当前集群节点个数。
5. 参考根据集群节点数优化Manager配置，对当前集群配置进行优化。
6. 配置完成后等待1小时后，查看告警列表中，该告警是否已清除。
   • 是，处理完毕。
   • 否，执行7。

收集故障信息。

7. 在FusionInsight Manager界面，选择“运维 > 日志 > 下载”。
8. 在“服务”中勾选“Controller”，单击“确定”。
9. 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分，单击“下载”。
10. 请联系运维人员，并发送已收集的故障日志信息。

告警清除

此告警修复后，系统会自动清除此告警，无需手工清除。

参考信息

根据集群节点数优化Manager配置

1. 以omm用户登录主管理节点。
2. 执行以下命令，切换目录。

   cd ${BIGDATA_HOME}/om-server/om/sbin

3. 执行以下命令查看当前集群Manager相关配置。

   sh oms_config_info.sh -q

4. 执行以下命令指定当前集群的节点数。

   命令格式：sh oms_config_info.sh -s 节点数

   例如：

   sh oms_config_info.sh -s 1000

   根据界面提示，输入“y”：

   The following configurations will be modified:
        Module       Parameter         Current               Target 
        Controller   controller.Xmx    4096m             =>  16384m
        Controller   controller.Xms    1024m             =>  8192m        Controller   controller.node.heartbeat.error.threshold     30000                      =>   60000                   
        Pms          pms.mem           8192m             =>  10240m 
   Do you really want to do this operation? (y/n):

   界面提示以下信息表示配置更新成功：

   ...
   Operation has been completed. Now restarting OMS server.                  [done]
   Restarted oms server successfully.

   

   • 配置更新过程中，OMS会自动重启。
   • 相近数量的节点规模对应的Manager相关配置是通用的，例如100节点变为101节点，并没有新的配置项需要刷新。