为了更好的获取和更新系统和软件，建议您更新镜像源为华为云镜像源，详细操作，请参见如何使用自动化工具配置华为云镜像源(x86_64和ARM)？。 操作流程 Linux实例手工搭建Hadoop环境的具体操作步骤如下： 安装JDK 安装Hadoop 配置Hadoop 配置SSH免密登录 启动Hadoop 实施步骤 安装JDK

查看更多 →

企业项目：默认即可。 虚拟私有云：默认即可。如果没有虚拟私有云，请单击“查看虚拟私有云”进入虚拟私有云，创建一个新的虚拟私有云。 子网：默认即可。 CPU架构：默认即可。 集群节点：请根据自身需要选择集群节点规格数量等。 MRS 3.x及之后版本集群Master节点规格不能小于64GB。

查看更多 →

搭建EMQX集群环境 安装openssl 安装依赖gcc、perl5 yum install gcc perl -y 安装配置openssl 下载openssl二进制包 wget tar -zxvf openssl-1.1.1n.tar.gz 手动编译并创建软连接 cd openssl-1

查看更多 →

选择待创建的MRS集群配套的组件。 Hadoop分析集群 可用区 选择集群工作区域下关联的可用区。 可用区1 企业项目 选择集群所属的企业项目。 default 虚拟私有云 选择需要创建集群的VPC，单击“查看虚拟私有云”进入VPC服务查看已创建的VPC名称和ID。如果没有VPC，需要创建一个新的VPC。 vpc-default

查看更多 →

SQL on Hadoop DWS支持直接读取存储在Hadoop HDFS文件系统上的结构化数据，对外提供标准SQL语言查询接口，通过向量化引擎完成Hadoop原生数据的复杂分析查询工作。 技术架构 DWS将HDFS上存储的结构化数据映射为外部表，从而重用已有的成熟数据库SQL编

查看更多 →

org/repos/dist/release/hadoop/common/中下载Hadoop的样例程序。 例如，选择hadoop-x.x.x版本，下载“hadoop-x.x.x.tar.gz”，解压后在“hadoop-x.x.x\share\hadoop\mapreduce”路径下获取“hadoop-mapreduce-examples-x

查看更多 →

，此时集群将终止服务，数据仍然保留。 退订：已经购买包周期集群的客户，在集群资源到期之前，如果不需要该集群资源，可以在MRS上对已订购包周期的产品进行集群资源退订。 购买集群 通过在MRS服务管理面，客户可以按需或者包年包月购买MRS集群，通过选择集群所建的区域及使用的云资源规格

查看更多 →

使用专属云。 图1 申请流程 申请专属计算集群 在华为云网站首页，单击页面右上方“控制台”。 进入华为云控制台登录页面。 输入注册用户信息，登录华为云控制台。 切换区域，进入已经开通专属云的区域，如图2所示。 图2 切换区域 选择“服务列表 > 专属云 > 专属计算集群”。 在“

查看更多 →

计算在云 Sdk::GetSolution 父主题： 改造功能模块说明

查看更多 →

计算子集群函数 pv_compute_pool_workload() 描述：返回计算子集群当前的负载状态。 返回类型：void 示例： 1 2 3 4 5 6 SELECT * from pv_compute_pool_workload(); nodename | rpinuse

查看更多 →

计算子集群函数 pv_compute_pool_workload() 描述：返回计算子集群当前的负载状态。 返回类型：void 示例： SELECT * from pv_compute_pool_workload(); nodename | rpinuse | maxrp |

查看更多 →

计算在云 Sdk::GetSolution 父主题： 改造功能模块说明

查看更多 →

OBS和 MapReduce服务 MRS，帮助用户在华为云上快速搭建大数据存算分离集群。MRS是一个在华为云上部署和管理Hadoop系统的服务，通过为MRS集群绑定弹性云服务 E CS 委托方式访问OBS，实现用户使用MRS集群作数据计算处理，而数据存储在OBS服务中。大数据在人们的生活中

查看更多 →

虚拟私有云：默认即可。如果没有虚拟私有云，请单击“查看虚拟私有云”进入虚拟私有云，创建一个新的虚拟私有云。 子网：默认即可。 企业项目：默认即可。 集群节点：请根据自身需要选择集群节点规格数量等。MRS 3.x及之后版本集群Master节点规格不能小于64GB。 Kerberos认证：选择是否开启Kerberos认证。购买集群后，不支持修改。

查看更多 →

云上：OBS、RDS、DWS、 CSS 、MongoDB、Redis。 云下：自建数据库、MongoDB、Redis。 云上：OBS。 云下：HDFS。 生态兼容 DLV 、永洪BI、帆软。 大数据生态工具。 自定义镜像 支持，满足业务多样性。 无。 工作流调度 DataArts Studio -DLF调度。 自建大数据生态的调度工具，如Airflow。

查看更多 →

使用 CDM 服务迁移Hadoop数据至MRS集群 场景介绍 本章节适用于将线下IDC机房或者公有云Hadoop集群中的数据（支持数据量在几十TB级别或以下的数据量级）迁移到华为云MRS服务。 本章节以通过华为云CDM服务 2.9.1.200版本进行数据迁移为例介绍。不同版本操作可能

查看更多 →

什么是专属计算集群 专属计算集群（Dedicated Computing Cluster，简称DCC）是在公有云上隔离出来的专属虚拟计算资源池，支持用户申请独占的物理设备，独享物理隔离的计算资源。用户通过独立的租户来在该资源池内申请宿主机资源后，可以在其上发放 弹性云服务器 。 专属

查看更多 →

扩容专属计算集群资源 操作场景 当申请的专属计算集群资源无法满足业务需要时，用户可以对专属计算资源进行扩容。 操作步骤 登录管理控制台。 单击左侧上方区域下拉列表，切换到待扩容的专属计算集群所在服务区。 选择“服务列表 > 计算 > 专属云”。 单击右上角的“申请扩容”。 进入申请资源页面。

查看更多 →

由浅入深，带您玩转DCC 01 了解 了解华为云专属计算集群的功能、使用场景，以及与专属云的关系，有助于您更准确的匹配实际业务，快速申请云上专属计算资源。 产品介绍 什么是专属计算集群 功能介绍 使用场景 专属计算集群和专属云的关系 03 使用 您可以查看申请成功的专属云，并在计算资源无法满足业务需求时

查看更多 →

专属计算集群如何计费？ 专属计算集群服务不同于其他服务，需要开通专属云后才能使用。 已经开通专属云服务的用户，可以通过包年的方式购买计算资源。 购买专属计算集群后，专属计算集群服务为专属云中各服务提供了计算资源，各服务使用的计算资源不再计费，而对于涉及的网络等资源则单独计费。

查看更多 →

获取专属计算集群资源 功能介绍 用户可以查询已经申请的专属计算集群资源。 URI GET /v1/{project_id}/dcc/resource_clusters 参数说明请参见表1。 表1 参数说明 参数 参数类型 是否必选 描述 project_id String 是 项目ID。

查看更多 →