更新时间:2022-12-14 GMT+08:00

调整Yarn服务配置

操作场景

HetuEngine依赖Yarn服务提供的资源分配、控制等能力,需要根据实际业务和集群的服务器配置情况调整Yarn服务配置,以获得最佳的性能效果。

操作步骤

  1. 登录FusionInsight Manager页面。
  2. 选择“集群 > 服务 > Yarn > 配置 > 全部配置“,参考表1配置Yarn服务参数。

    表1 Yarn服务配置参数

    参数名称

    默认值

    建议值

    yarn.nodemanager.resource.memory-mb

    16384

    为达到最优性能,可配置为集群中节点最小物理内存的90%。

    yarn.nodemanager.resource.cpu-vcores

    8

    为达到最优性能,可配置为集群中节点最小CPU vCores。

    yarn.scheduler.maximum-allocation-mb

    65536

    为达到最优性能,可配置为集群中节点最小物理内存的90%。

    yarn.scheduler.maximum-allocation-vcores

    32

    为达到最优性能,可配置为集群中节点最小CPU vCores。

  3. 单击“保存”,保存配置。
  4. 选择“集群 > 服务 > Yarn > 更多 > 重启服务”,重启Yarn服务让参数生效。