优化HDFS DataNode RPC的服务质量 配置场景 当客户端写入HDFS的速度大于DataNode的硬盘带宽时，硬盘带宽会被占满，导致DataNode失去响应。客户端只能通过取消或恢复通道进行规避，这会导致写入失败及不必要的通道恢复操作。 本章节适用于 MRS 3.x及后续版本。

查看更多 →

优化HDFS DataNode RPC的服务质量 配置场景 当客户端写入HDFS的速度大于DataNode的硬盘带宽时，硬盘带宽会被占满，导致DataNode失去响应。客户端只能通过取消或恢复通道进行规避，这会导致写入失败及不必要的通道恢复操作。 配置步骤 引入了新的配置参数“dfs

查看更多 →

创建http转rpc方法 功能介绍 创建http转rpc方法。 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI POST /v2/{project_id}/engin

查看更多 →

删除http转rpc方法 功能介绍 删除http转rpc方法。 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI DELETE /v2/{project_id}/eng

查看更多 →

p2Rpcs/{http2Rpc_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id gateway_id 是 String 网关实例id http2Rpc_id 是 String http2Rpc id 请求参数 表2 请求Header参数

查看更多 →

及创建文件。NameNode接受HDFS的操作，将其视作RPC调用并置入FIFO调用队列，供读取线程处理。虽然FIFO在先到先服务的情况下足够公平，但如果用户执行的I/O操作较多，相比I/O操作较少的用户，将获得更多的服务。在这种情况下，FIFO有失公平并且会导致延迟增加。 图1

查看更多 →

及创建文件。NameNode接受HDFS的操作，将其视作RPC调用并置入FIFO调用队列，供读取线程处理。虽然FIFO在先到先服务的情况下足够公平，但如果用户执行的I/O操作较多，相比I/O操作较少的用户，将获得更多的服务。在这种情况下，FIFO有失公平并且会导致延迟增加。 图1

查看更多 →

使用SFS盘出现报错rpc_check_timeout:939 callbacks suppressed 问题现象 弹性文件服务（Scalable File Service，SFS）提供按需扩展的高性能文件存储（NAS），可以在裸金属服务器中通过网络协议挂载使用，SFS支持NFS

查看更多 →

使用Stream Load时报RPC超时错误 问题现象 导入数据时BE打开tablet writer的RPC超时，报错： failed to open tablet writer, error=RPC call is timeout, error_text=[E1008] Reached

查看更多 →

设置Hadoop中各模块的RPC通道是否加密。通道包括： 客户端访问HDFS的RPC通道。 HDFS中各模块间的RPC通道，如DataNode与NameNode间的RPC通道。 客户端访问Yarn的RPC通道。 NodeManager和ResourceManager间的RPC通道。 Spar

查看更多 →

响应Body参数 参数 参数类型 描述 total Integer http2Rpc 总数。 data Array of Http2Rpc objects Http2Rpc 详细信息。 表4 Http2Rpc 参数 参数类型 描述 gatewayId String 网关的ID。 pluginConfig

查看更多 →

启用集群间复制功能需要重启Yarn，服务重启期间无法访问。 前提条件 两个集群HDFS的参数“hadoop.rpc.protection”需使用相同的数据传输方式。设置为“privacy”表示加密，“authentication”表示不加密。 参考修改集群服务配置参数，进入HDFS服务参数“全部配置”界面“，搜索hadoop

查看更多 →

设置后需要重新下载客户端配置，否则HDFS无法提供读写服务。 设置Hadoop中各模块的RPC通道是否加密。通道包括： 客户端访问HDFS的RPC通道。 HDFS中各模块间的RPC通道，如DataNode与NameNode间的RPC通道。 客户端访问Yarn的RPC通道。 NodeManager和R

查看更多 →

客户端访问Yarn的RPC通道 NodeManager和ResourceManager间的RPC通道。 Spark访问Yarn，Spark访问HDFS的RPC通道。 Mapreduce访问Yarn，MapReduce访问HDFS的RPC通道。 HBase访问HDFS的RPC通道。 说明：

查看更多 →

集群安装启动后，如果修改NameNode的RPC端口，则需要重新格式化Zkfc服务来更新zookeeper上的节点信息。 处理步骤 登录Manager，停止HDFS服务。 在停止HDFS时，建议不要停止相关服务。 停止成功后，登录到被修改了RPC端口的Master节点。 如果两个Master节点都被修改

查看更多 →

检查HDFS RPC响应时间。 在 FusionInsight Manager的告警列表中，查看HBase服务依赖的HDFS服务是否有“NameNode RPC处理平均时间超过阈值”告警产生。 是，执行6。 否，执行8。 参考“ALM-14021 NameNode RPC处理平均时间超过阈值”的处理步骤处理该故障。

查看更多 →

待操作集群的名称 > 服务 > HDFS”，单击图表区域右上角的下拉菜单，选择“定制 > RPC”，在弹出的对话框中选择“主NameNode RPC处理平均时间”，单击“确定”。 图1 主NameNode RPC处理平均时间 查看“主NameNode RPC处理平均时间”监控中，

查看更多 →

启用集群间复制功能需要重启Yarn，服务重启期间无法访问。 前提条件 两个集群HDFS的参数“hadoop.rpc.protection”需使用相同的数据传输方式。设置为“privacy”表示加密，“authentication”表示不加密。 参考修改集群服务配置参数，进入HDFS服务参数“全部配置”界面，搜索hadoop

查看更多 →

简单 RPC（Unary RPC） 发送单个请求，接收单个响应。 服务端流式 RPC （Server streaming RPC） 发送单个请求，接收单个响应。 客户端流式 RPC （Client streaming RPC） 发送多个请求，接收单个响应。 双向流式 RPC（Bi-directional

查看更多 →

Manager系统中，选择“集群 > 待操作集群的名称 > 服务 > 服务名 > 配置”，展开“全部配置”页签。在搜索框中输入参数名称。 修改配置参数后需要重启对应服务以使配置生效。 表1 参数说明 服务名称 配置参数 说明 缺省值 HBase hbase.rpc.protection 设置HBase

查看更多 →

HDFS（RemoteHDFS）的备份任务。 对系统的影响 启用集群间复制功能需要重启Yarn，服务重启期间无法访问。 前提条件 拷贝数据的集群的HDFS的参数“hadoop.rpc.protection”需使用相同的数据传输方式。默认设置为“privacy”表示加密，“authentication”表示不加密。

查看更多 →