配置HDFS连接
MRS HDFS
连接MRS上的HDFS数据源时，相关参数如表1所示。
参数名 |
说明 |
取值样例 |
|---|---|---|
名称 |
连接的名称，根据连接的数据源类型，用户可自定义便于记忆、区分的连接名。 |
mrs_hdfs_link |
Manager IP |
MRS Manager的IP地址，可以单击输入框后的“选择”来选定已创建的MRS集群，CDM会自动填充下面的鉴权参数。 |
127.0.0.1 |
用户名 |
选择KERBEROS鉴权时，需要配置MRS Manager的用户名和密码。 从HDFS导出目录时，如果需要创建快照，这里配置的用户需要HDFS系统的管理员权限。 |
cdm |
密码 |
访问MRS Manager的用户密码。 |
- |
认证类型 |
访问MRS的认证类型：
|
SIMPLE |
运行模式 |
选择HDFS连接的运行模式：
选择STANDALONE模式时，CDM支持在多个MRS集群的HDFS之间迁移数据。 |
STANDALONE |
Agent |
单击“选择”，选择连接Agent中已创建的Agent。运行模式选择Agent时显示此参数。 |
- |
FusionInsight HDFS
连接FusionInsight HD上的HDFS数据源时，相关参数如表2所示。
参数名 |
说明 |
取值样例 |
|---|---|---|
名称 |
连接的名称，根据连接的数据源类型，用户可自定义便于记忆、区分的连接名。 |
FI_hdfs_link |
Manager IP |
FusionInsight Manager平台的地址。 |
127.0.0.1 |
Manager端口 |
FusionInsight Manager平台的端口。 |
28443 |
CAS Server端口 |
与FusionInsight对接的CAS Server的端口。 |
20009 |
用户名 |
登录FusionInsight Manager平台的用户名。 从HDFS导出目录时，如果需要创建快照，这里配置的用户需要HDFS系统的管理员权限。 |
cdm |
密码 |
FusionInsight Manager平台的密码。 |
- |
认证类型 |
访问FusionInsight HD的认证类型。
|
KERBEROS |
运行模式 |
选择HDFS连接的运行模式：
|
STANDALONE |
Agent |
单击“选择”，选择连接Agent中已创建的Agent。运行模式选择Agent时显示此参数。 |
- |
Apache HDFS
连接Apache Hadoop上的HDFS数据源时，相关参数如表3所示。
参数名 |
说明 |
取值样例 |
|---|---|---|
名称 |
连接的名称，根据连接的数据源类型，用户可自定义便于记忆、区分的连接名。 |
hadoop_hdfs_link |
URI |
表示NameNode URI地址。 |
hdfs://nn1.example.com/ |
认证类型 |
访问Hadoop的认证类型。
|
KERBEROS |
Principal |
选择Kerberos鉴权时，用于认证的帐号Principal，您可以联系Hadoop管理员获取此帐号。 |
USER@YOUR-REALM.COM |
Keytab文件 |
选择Kerberos鉴权时，用于认证的Keytab文件，您可以联系Hadoop管理员获取此文件。 |
/opt/user.keytab |
运行模式 |
选择HDFS连接的运行模式：
|
STANDALONE |
IP与主机名映射 |
运行模式选择“EMBEDDED”、“STANDALONE”时，该参数有效。 如果HDFS配置文件使用主机名，需要配置IP与主机的映射。格式：IP与主机名之间使用空格分隔，多对映射使用分号或回车换行分隔。 |
10.1.6.9 hostname01 10.2.7.9 hostname02 |
Agent |
运行模式选择“Agent”时，单击“选择”，选择连接Agent中已创建的Agent。 |
- |
