文档首页/ MapReduce服务 MRS/ 用户指南(安卡拉区域)/ 告警参考/ ALM-12062 OMS参数配置同集群规模不匹配
更新时间:2024-11-29 GMT+08:00

ALM-12062 OMS参数配置同集群规模不匹配

告警解释

系统每一个小时,整点检查一次OMS参数配置和集群规模是否匹配,如果检查OMS配置的参数不足以支撑当前的集群规模,系统将发送此告警。待用户修改OMS参数配置,该告警会自动清除。

告警属性

告警ID

告警级别

告警类型

业务类型

是否可自动清除

12062

重要

业务质量告警

FusionInsight Manager

告警参数

类别

参数名称

参数含义

定位信息

来源

产生告警的集群或系统名称。

服务名

产生告警的服务名称。

角色名

产生告警的角色名称。

主机名

产生告警的主机名。

对系统的影响

如果当前集群配置的参数小于集群规模要求的配置标准时,可能会导致用户作业运行延迟,服务页面响应缓慢等问题。严重时会导致集群节点Agent或者OMS进程运行异常,导致组件作业提交、OMS数据同步等失败。

可能原因

OMS配置同集群规模不匹配。

处理步骤

检查OMS配置同集群规模是否匹配。

  1. omm用户登录主管理节点。
  2. 执行命令vi ${BIGDATA_LOG_HOME}/controller/scriptlog/modify_manager_param.log打开对应日志,搜索日志“Current oms configurations can not support xx nodes”,其中xx为当前集群节点个数
  3. 参考参考信息根据集群节点数优化Manager配置。
  4. 配置完成后等待1小时后,查看告警列表中,该告警是否已清除。

    • 是,处理完毕。
    • 否,执行5

收集故障信息。

  1. 在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
  2. 在“服务”中勾选“Controller”,单击“确定”。
  3. 单击右上角的编辑按钮设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分,单击“下载”。
  4. 请联系运维人员,并发送已收集的故障日志信息。

告警清除

此告警修复后,系统会自动清除此告警,无需手工清除。

参考信息

根据集群节点数优化Manager配置

  1. omm用户登录主管理节点。
  2. 执行以下命令,切换目录。

    cd ${BIGDATA_HOME}/om-server/om/sbin

  3. 执行以下命令查看当前集群Manager相关配置。

    sh oms_config_info.sh -q

  4. 执行以下命令指定当前集群的节点数。

    命令格式:sh oms_config_info.sh -s 节点数

    例如:

    sh oms_config_info.sh -s 1000

    根据界面提示,输入“y”

    The following configurations will be modified:
         Module       Parameter         Current               Target 
         Controller   controller.Xmx    4096m             =>  16384m
         Controller   controller.Xms    1024m             =>  8192m        Controller   controller.node.heartbeat.error.threshold     30000                      =>   60000                   
         Pms          pms.mem           8192m             =>  10240m 
    Do you really want to do this operation? (y/n):

    界面提示以下信息表示配置更新成功:

    ...
    Operation has been completed. Now restarting OMS server.                  [done]
    Restarted oms server successfully.
    • 配置更新过程中,OMS会自动重启。
    • 相近数量的节点规模对应的Manager相关配置是通用的,例如100节点变为101节点,并没有新的配置项需要刷新。