MRS 集群中安装的组件能否删除？ 已经创建的MRS 3.1.0及之前版本集群中的组件不可以删除，如果不使用的话可以登录Manager页面在服务管理中找到对应的组件将其停止。 MRS 3.1.2-LTS.3及之后版本的自定义类型集群支持删除组件，具体请参见管理服务操作。 父主题： 集群管理类

查看更多 →

启用安全认证的MRS集群快速入门 本章节提供从零开始使用安全集群并执行MapReduce程序、Spark程序和Hive程序的操作指导。 MRS 3.x版本Presto组件暂不支持开启Kerberos认证。 本指导的基本内容如下所示： 创建安全集群并登录其Manager 创建角色和用户

查看更多 →

MRS集群是否支持重装系统？ 问： MRS集群是否支持重装系统？ 答： MRS集群不支持重装系统。 父主题： 性能优化类

查看更多 →

MRS集群是否支持对接外部KDC？ 问：MRS集群是否支持对接外部KDC？ 答：MRS服务只支持使用自带的内部KDC。 父主题： 周边生态对接使用

查看更多 →

MRS集群周期备份任务执行失败 问题现象 MRS 1.7.2版本集群周期备份故障，在MRS Manager页面的“告警管理中”出现“ALM-12034 周期备份任务失败”告警。 原因分析 集群在周期性的备份中，由于备份产生了软连接，将/srv/BigData/LocalBacku

查看更多 →

使用 CDM 服务迁移Hive数据至MRS集群 场景介绍 本章节适用于将线下IDC机房或者公有云Hive集群中的数据（支持数据量在几十TB级别或以下的数据量级）迁移到华为云MRS服务。 Hive数据迁移分两部分内容： Hive的元数据信息，存储在MySQL等数据库中。MRS Hive集群的元数据会默认存储到MRS

查看更多 →

由浅入深，带您玩转MRS 01 了解 了解华为云MRS服务的产品优势和应用场景，有助于您更准确地匹配实际业务，更快速地选择所需的组件，帮助您构建海量数据信息处理分析的一站式企业级大数据集群。 产品介绍 什么是MRS MRS应用场景 MRS各版本组件一览表 MRS使用限制 集群组件介绍 产品功能

查看更多 →

使用CDM服务迁移Hadoop数据至MRS集群 场景介绍 本章节适用于将线下IDC机房或者公有云Hadoop集群中的数据（支持数据量在几十TB级别或以下的数据量级）迁移到华为云MRS服务。 本章节以通过华为云CDM服务 2.9.1.200版本进行数据迁移为例介绍。不同版本操作可能

查看更多 →

MRS集群版本如何进行升级？ MRS普通版本集群 MRS普通版本集群无法实现低版本到高版本的平滑升级。如需体验新版本集群相关能力，建议重新创建一个新版本的集群，然后将老版本集群的数据迁移到新的集群。 MRS LTS版本集群 MRS LTS版集群支持版本升级能力，可从历史版本升级至

查看更多 →

MRS集群是否支持切换操作系统？ 问： MRS集群是否支持切换操作系统？ 答： MRS集群节点不支持切换操作系统。 父主题： 性能优化类

查看更多 →

集群外节点访问MRS HDFS报错 问题背景与现象 集群外节点访问MRS HDFS的时候报错：Class org.apache.hadoop.hdfs.server.namenode.ha.AdaptiveFailoverProxyProvider not found。 原因分析

查看更多 →

huaweicloud.sdk.mrs.v2.region.MrsRegion; import com.huaweicloud.sdk.mrs.v2.*; import com.huaweicloud.sdk.mrs.v2.model.*; public class ShowMrsFlavorsSolution

查看更多 →

MRS集群组件对接OBS（基于委托） Flink对接OBS文件系统 Flume对接OBS文件系统 HDFS客户端对接OBS文件系统 Hive对接OBS文件系统 MapReduce对接OBS文件系统 Spark2x对接OBS文件系统 Sqoop对接外部存储系统 Hudi对接OBS文件系统

查看更多 →

MRS集群组件对接OBS（基于Guardian） Hive组件对接OBS Flink组件对接OBS Spark组件对接OBS Hudi组件对接OBS HetuEngine组件对接OBS HDFS组件对接OBS Yarn组件对接OBS Mapreduce组件对接OBS 父主题： 基于Guardian服务对接OBS

查看更多 →

MRS集群未绑定公网IP mrs 确保 MapReduce服务 （MRS）无法公网访问。华为云MRS集群主节点可能包含敏感信息，并且此类账号需要访问控制。 MRS集群绑定公网IP，视为“不合规” 对于不合规的MRS资源，用户可以解除其与弹性公网IP的绑定。 rds-instance-no-public-ip

查看更多 →

仅支持SparkSQL存取Hive数据，制定数据导入到Hive里存储的保存目录。 Map数 配置数据操作的MapReduce任务中同时启动的map数量。不可与“Map数据块大小”同时配置。参数值必须小于或等于“3000”。 Map数据块大小 配置数据操作的MapReduce任务中启动map所处理的数据大小，

查看更多 →

Sqoop1.4.7适配MRS 3.x集群 Sqoop是专为Apache Hadoop和结构化数据库（如关系型数据库）设计的高效传输大量数据的工具。客户需要在MRS中使用sqoop进行数据迁移，MRS旧版本中未自带Sqoop，客户可参考此文档自行安装使用。MRS 3.1.0及之后版本

查看更多 →

MRS集群安装的Python版本是多少？ 以root用户登录任意一个Master节点，然后执行python3命令即可获取MRS集群安装的Python版本。 表1 MRS集群安装的Python版本 MRS集群版本 Python版本 MRS 3.1.0 Python 3.8.0 MRS

查看更多 →

，作为数据导出的MapReduce任务中各个map的输入文件。 Map数 配置数据操作的MapReduce任务中同时启动的map数量。不可与“Map数据块大小”同时配置。参数值必须小于或等于“3000”。 Map数据块大小 配置数据操作的MapReduce任务中启动map所处理的

查看更多 →

），支持各种数据源导入数据到大数据集群中。使用云数据迁移云服务也可以将外部数据导入至MRS集群中。 数据存储 MRS支持结构化和非结构化数据在集群中的存储，并且支持多种高效的格式来满足不同计算引擎的要求。 HDFS是大数据上通用的分布式文件系统。 OBS是对象存储服务，具有高可用低成本的特点。

查看更多 →

如何在MRS集群中手动添加组件？ 问：如何在已创建好的MRS集群中手动添加服务？ 答： 已经创建的MRS 3.1.0及之前版本集群不支持安装新的组件。如果需要使用当前集群未安装的组件，则需要重新创建一个集群，并且选择所需要的组件。 MRS 3.1.2-LTS.3及之后版本的自定义

查看更多 →