更新时间:2022-02-22 GMT+08:00

配置MapReduce shuffle address

配置场景

当MapReduce shuffle服务启动时,它尝试基于localhost绑定IP。如果需要MapReduce shuffle服务去连接特定IP,那么没有可用的配置。下面的描述允许您配置连接到特定的IP。

配置描述

当需要MapReduce shuffle服务绑定特定IP时,需要在NodeManager实例所在节点的配置文件“mapred-site.xml”中设置下面的参数。

表1 参数描述

参数

描述

默认值

mapreduce.shuffle.address

指定地址来运行shuffle服务,格式是IP:PORT,参数的默认值为空。当参数值为空时,将绑定localhost,默认端口为13562。

说明:

如果涉及到的PORT值和配置的mapreduce.shuffle.port值不一样时,mapreduce.shuffle.port将不会生效。

-