更新MRS数据源配置
操作场景
MRS的HDFS集群的如下参数配置变更时,可能造成GaussDB(DWS) 集群无法从HDFS集群导入数据。使用HDFS集群导入数据前,需要执行MRS数据源配置的更新操作。
参数名 |
参数解释 |
---|---|
dfs.client.read.shortcircuit |
是否开启本地读。 |
dfs.client.read.shortcircuit.skip.checksum |
本地读时是否跳过数据校验。 |
dfs.client.block.write.replace-datanode-on-failure.enable |
向HDFS写数据块发生失败时,是否替换新的节点作为副本存储位置。 |
dfs.encrypt.data.transfer |
是否开启数据加密。
说明:
此参数仅对启用Kerberos认证的集群有效。 |
dfs.encrypt.data.transfer.algorithm |
指定密钥传输的加密解密算法。 |
dfs.encrypt.data.transfer.cipher.suites |
指定实际存储数据传输的加密解密算法。 |
dfs.replication |
默认数据副本个数。 |
dfs.blocksiz |
默认数据块大小。 |
hadoop.security.authentication |
安全认证模式。 |
hadoop.rpc.protection |
RPC通信保护模式。 |
dfs.domain.socket.path |
本地使用的Domain socket路径。 |
前提条件
GaussDB(DWS) 集群已创建MRS数据源连接。
对系统的影响
更新MRS数据源连接时,GaussDB(DWS) 集群会自动重启并无法提供服务。
操作步骤
- 在GaussDB(DWS) 管理管制台,单击“集群管理”。
- 在集群列表,单击指定集群的名称,然后单击“MRS数据源”。
- 在MRS数据源列表中,选中需要更新的MRS数据源,在“操作”列中,单击“更新配置”。
更新当前连接的“MRS集群状态”和“配置状态”。在更新配置时,无法创建新的连接,且会检查安全组规则是否正常并自助修复。