更新时间:2024-08-13 GMT+08:00
分享

MRS 1.9.3.9及之后版本补丁说明

MRS 1.9.3.11补丁说明

补丁号

MRS 1.9.3.11

发布时间

2024-02-10

安装前处理

  • 安装此补丁前,如果之前有装过MRS_1x2x_Patch_Diskmgt_20230308.tar.gz补丁,需要先卸载该补丁,卸载完之后请等待10分钟再执行MRS 1.9.3.11补丁的安装操作。
  • 如果MRS集群节点故障或者网络不通,需要先隔离该节点,否则补丁会安装失败。

新特性和优化

MRS Manager

  • 支持慢盘隔离告警功能

补丁兼容关系

MRS 1.9.3.11补丁包中已包含所有MRS 1.9.3版本单点问题修复补丁。

安装补丁的影响

请参考安装补丁的影响

MRS 1.9.3.10补丁说明

补丁号

MRS 1.9.3.10

发布时间

2023-11-10

安装前处理

  • 安装此补丁前,如果之前有装过MRS_1x2x_Patch_Diskmgt_20230308.tar.gz补丁,需要先卸载该补丁,卸载完之后请等待10分钟再执行MRS 1.9.3.10补丁的安装操作。
  • 如果MRS集群节点故障或者网络不通,需要先隔离该节点,否则补丁会安装失败。

新特性和优化

MRS Manager

  • 新增磁盘不可用告警
  • 新增设备分区丢失告警自动清除能力
  • 慢盘/卡io算法优化
  • 慢盘自动隔离机制优化

补丁兼容关系

MRS 1.9.3.10补丁包中已包含所有MRS 1.9.3版本单点问题修复补丁。

安装补丁的影响

请参考安装补丁的影响

MRS 1.9.3.9补丁说明

补丁号

MRS 1.9.3.9

发布时间

2023-07-30

安装前处理

  • 安装此补丁前,如果之前有装过MRS_1x2x_Patch_Diskmgt_20230308.tar.gz补丁,需要先卸载该补丁,卸载完之后请等待10分钟再执行MRS 1.9.3.9补丁的安装操作。
  • 如果MRS集群节点故障或者网络不通,需要先隔离该节点,否则补丁会安装失败。

新特性和优化

MRS Manager

补丁兼容关系

MRS 1.9.3.9补丁包中已包含所有MRS 1.9.3版本单点问题修复补丁。

安装补丁的影响

请参考安装补丁的影响

安装补丁的影响

  • MRS 1.9.3.11补丁安装/卸载过程中会自动重启OMS,安装过程中将影响作业提交以及集群扩缩容等管控面集群控制功能,请选择适当的时间进行补丁安装,不需要重启大数据组件。
  • MRS 1.9.3.10补丁安装/卸载过程中会自动重启OMS,安装过程中将影响作业提交以及集群扩缩容等管控面集群控制功能,请选择适当的时间进行补丁安装,不需要重启大数据组件。
  • MRS 1.9.3.9补丁安装/卸载过程中会自动重启OMS,安装过程中将影响作业提交以及集群扩缩容等管控面集群控制功能,请选择适当的时间进行补丁安装,安装完需要重启HDFS、YARN、MapReduce、Kafka以及相关依赖服务。
  • MRS 1.9.3.8补丁安装/卸载过程中会自动重启OMS,安装过程中将影响作业提交以及集群扩缩容等管控面集群控制功能,请选择适当的时间进行补丁安装,安装完需要重启HDFS、YARN、MapReduce、Kafka、Hive、HBase、Spark、Presto以及相关依赖服务。

    重启组件的范围,是以补丁依次升级给定的范围,即如果是从MRS 1.9.3.8打补丁升级到MRS 1.9.3.9,需要重启MRS 1.9.3.9补丁的组件;如果是跨版本升级的,则需要重启的组件范围是各补丁的合集。

  • 慢盘隔离特性约束:
    1. 隔离慢盘之前无法判断集群节点是否存在客户私有化数据,因此不要在节点数据盘存放个人私有化数据,避免慢盘隔离时对业务造成影响;
    2. 自动触发慢盘隔离动作后,对于原来写两副本数据存在单副本运行的场景,存在一定风险,请知;同时华为侧运维人员会尽快对慢盘进行替换;
    3. 慢盘自动隔离能力支持单节点同时出现多个慢盘【默认配置为4】时自动隔离节点,此时该节点会变成隔离状态,客户无需特殊操作,MRS运维相关人员会及时介入处理并恢复。
  • 支持HDFS单副本检测能力

    MRS 1.9.3.9及其后续补丁中,会增加HDFS单副本检测和告警能力,新增是否允许写入单副本数据配置项dfs.single.replication.enable,对于新建集群该值配置为false,因为HDFS单副本并不属于MRS服务SLA保障范围; 但是对于存量集群,为了考虑兼容性,补丁安装完成后dfs.single.replication.enable配置项值为true,保证客户业务不受影响,建议补丁完成后对于没有单副本诉求时手动修改为false后滚动重启HDFS服务,保证HDFS数据的高可靠; 对于确定存在单副本诉求的文件也可通过dfs.single.replication.exclude.pattern配置项设置单副本的数据文件和目录。

  • MRS 1.9.3.9及其后续补丁安装后,需要重新下载安装全量的客户端,包含Master节点的原始客户端和虚拟私有云的其他节点使用的客户端(即用户自行搭建的客户端)。如果集群之前安装了1.9.3.8补丁,不需要做此操作。
    • 重新安装客户端前建议先对老客户端进行备份。
    • 若您根据业务场景修改过客户端配置,请重装客户端后再次修改客户端配置。

相关文档