更新时间:2022-12-14 GMT+08:00

如何使用Python远程连接HDFS的端口?

HDFS开源HTTP端口3.0.0以前版本的默认端口为50070,3.0.0及以后的默认端口为9870。HDFS开源组件的端口号如HDFS常用端口所示。

HDFS常用端口

表中涉及端口的协议类型均为:TCP。

配置参数

默认端口

端口说明

dfs.namenode.rpc.port

  • 9820(MRS 3.x之前版本)
  • 8020(MRS 3.x及之后版本)

NameNode RPC 端口。

该端口用于:

1. HDFS客户端与Namenode间的通信。

2. Datanode与NameNode之间的连接。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

dfs.namenode.http.port

9870

HDFS HTTP端口(NameNode)。

该端口用于:

1. 点对点的NameNode检查点操作。

2. 远程Web客户端连接NameNode UI。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

dfs.namenode.https.port

9871

HDFS HTTPS端口(NameNode)。

该端口用于:

1. 点对点的NameNode检查点操作。

2. 远程Web客户端连接NameNode UI。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

dfs.datanode.ipc.port

9867

Datanode IPC 服务器端口。

该端口用于:

客户端连接DataNode用来执行RPC操作。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

dfs.datanode.port

9866

Datanode数据传输端口。

该端口用于:

1. HDFS客户端从DataNode传输数据或传输数据到DataNode。

2. 点对点的Datanode传输数据。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

dfs.datanode.http.port

9864

Datanode HTTP端口。

该端口用于:

安全模式下,远程Web客户端连接DataNode UI。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

dfs.datanode.https.port

9865

Datanode HTTPS端口。

该端口用于:

安全模式下,远程Web客户端连接DataNode UI。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

dfs.JournalNode.rpc.port

8485

JournalNode RPC端口。

该端口用于:

客户端通信用于访问多种信息。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

dfs.journalnode.http.port

8480

JournalNode HTTP端口。

该端口用于:

安全模式下,远程Web客户端链接JournalNode。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

dfs.journalnode.https.port

8481

JournalNode HTTPS端口。

该端口用于:

安全模式下,远程Web客户端链接JournalNode。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是

httpfs.http.port

14000

HttpFS HTTP服务器侦听的端口。

该端口用于:

远程REST接口连接HttpFS。

说明:

端口的取值范围为一个建议值,由产品自己指定。在代码中未做端口范围限制。

  • 安装时是否缺省启用:是
  • 安全加固后是否启用:是