修改 云服务器 的企业项目 云 服务器 组不一致 将云服务器的云服务器组修改成与节点池的云服务器组一致。 修改云服务器的云服务器组 修改云服务器的规格 待纳管云服务器规格需修改成节点池中包含的规格。 更多操作指导请参见E CS 变更规格通用操作。 登录ECS控制台。 单击目标云服务器名称，

查看更多 →

x及后续版本。 配置描述 为了使LZC压缩生效，需要在客户端的配置文件“core-site.xml”中（例如“客户端安装路径/HDFS/hadoop/etc/hadoop/”）配置如下参数。 表1 参数描述 参数 描述 默认值 io.compression.codecs 为了使LZC

查看更多 →

一个在华为云上部署和管理Hadoop系统的服务，一键即可部署Hadoop集群。 MRS 提供租户完全可控的一站式企业级大数据集群云服务，完全兼容开源接口，结合 华为云计算 、存储优势及大数据行业经验，为客户提供高性能、低成本、灵活易用的全栈大数据平台，轻松运行Hadoop、Spark、H

查看更多 →

deManager已经升级，应用程序仍然可以运行旧版本的Hadoop。 配置描述 进入HDFS客户端。 以客户端安装用户，登录安装客户端的节点。 执行以下命令，切换到客户端安装目录。 cd 客户端安装路径 执行以下命令配置环境变量。 source bigdata_env 如果集群

查看更多 →

fs.obs.impl配置为org.apache.hadoop.fs.obs.OBSFileSystem。 修改后“重启”或“滚动重启”HDFS集群，再重启“部署客户端配置”。 进入YARN集群，重启“部署客户端配置”。 查看节点中/etc/hadoop/conf/core-site

查看更多 →

盘，从而极大缩减了故障硬盘的修复时间，有利于提高系统的可靠性。 节点磁盘LVM配置 MRS支持将多个磁盘配置成LVM（Logic Volume Management），多个磁盘规划成一个逻辑卷组。配置成LVM可以避免各磁盘间使用不均的问题，保持各个磁盘间均匀使用在HDFS和Kaf

查看更多 →

负载均衡器配置：后端云服务器组 后端云服务器组的负载均衡算法 服务对接的后端实例会在一个后端云服务器组中，此参数支持配置后端云服务器组的负载均衡算法。 参数名 取值范围 默认值 是否允许修改 作用范围 k8s annotation: kubernetes.io/elb.lb-algorithm

查看更多 →

附录 名词解释 基本概念、云服务简介、专有名词解释 弹性云服务器 ECS：是一种可随时自助获取、可弹性伸缩的云服务器，可帮助您打造可靠、安全、灵活、高效的应用环境，确保服务持久稳定运行，提升运维效率。 虚拟私有云 VPC：为云服务器、云容器、云数据库等云上资源构建隔离、私密的虚拟网络

查看更多 →

deManager已经升级，应用程序仍然可以运行旧版本的Hadoop。 配置描述 进入HDFS客户端。 以客户端安装用户，登录安装客户端的节点。 执行以下命令，切换到客户端安装目录。 cd 客户端安装路径 执行以下命令配置环境变量。 source bigdata_env 如果集群

查看更多 →

Hdfs、大数据相关驱动安装与Standalone模式local配置 配置驱动 hadoop依赖.zip。 影响数据源中hdfs数据源的连接。 压缩包内的jar包放入工作目录：lib\edi\hadoop目录下。 此目录会内自带edi-hadoop-deps-4.4.1-SNAPSHOT

查看更多 →

搭建Windows环境 镜像部署Windows环境 介绍如何使用华为云镜像，通过切换镜像部署Windows环境。 搭建Hadoop环境 手工搭建Hadoop环境（Linux） 以CentOS操作系统云服务器为例，介绍如何搭建Hadoop环境。 搭建Node.js环境 手工部署Node.js环境

查看更多 →

用户在 弹性云服务器 里可以通过手动安装客户端或一键部署客户端的方法，使用HBase Shell访问集群。如果集群开启了安全通道，连接集群的方法请参考HBase安全集群连接步骤。 一键部署客户端 准备Linux弹性云服务器。 使用一键部署客户端工具，建议Linux弹性云服务器的操作系

查看更多 →

当前CGroups仅用于限制CPU使用率。 配置描述 有关如何配置CPU隔离与安全的CGroups功能的详细信息，请参见Hadoop官网： MRS 3.2.0之前版本：http://hadoop.apache.org/docs/r3.1.1/hadoop-yarn/hadoop-yarn-site/NodeManagerCgroups

查看更多 →

HDFS > 配置 > 全部配置”，打开HDFS服务配置页面。 将配置项“dfs.datanode.data.dir”从默认值“%{@auto.detect.datapart.dn}”修改为新的目标目录，例如“${BIGDATA_DATA_HOME}/hadoop/data3/dn”。

查看更多 →

参数名称 值 hadoop.proxyuser.test.hosts * hadoop.proxyuser.test.groups * 修改Yarn实例配置，登录 FusionInsight Manager页面，选择“集群 > 服务 > Yarn > 配置 > 全部配置 > Yarn（服务）

查看更多 →

此处设置的“vCPU”和“内存”大小不影响后续购买云桌面的桌面规格。 单击“下一步：网络配置”，进入网络配置界面。参考表2所示说明配置。其他未涉及参数保持默认即可。 表2 网络配置参数说明 参数 配置说明 取值样例 网络 选择使用的虚拟私有云、子网，并设置IP分配方式为默认。 - 安全组

查看更多 →

指定授权模式。本例中选择“以后配置”。 图5 指定授权模式。 选择允许访问此RD会话主机服务器的用户组。 图6 选择用户组 配置客户端体验。本例中选择“音频和视频播放”。 图7 配置客户端体验 为RD授权配置搜索范围。 图8 为RD授权配置搜索范围 确认安装选择，单击“安装”。 图9 安装远程桌面服务

查看更多 →

确认在云服务器上安装的角色，单击“安装” 。 图7 安装 图8 功能安装 安装完成后，重启服务器。 图9 重启服务器 允许多用户远程连接云服务器 在运行里输入“gpedit.msc”，打开计算机本地组策略。 图10 gpedit.msc 在计算机本地组策略里选择“计算机配置 > 管理模板

查看更多 →

配置Windows通过EIP访问集群Spark 操作场景 该章节通过指导用户配置集群绑定EIP，并配置Spark文件的方法，方便用户可以在本地对样例文件进行编译。 本章节以运行SparkScalaExample样例为例进行说明。 操作步骤 为集群的每个节点申请弹性公网IP，并将本

查看更多 →

配置Windows通过EIP访问集群Spark 操作场景 该章节通过指导用户配置集群绑定EIP，并配置Spark文件的方法，方便用户可以在本地对样例文件进行编译。 本章节以运行SparkScalaExample样例为例进行说明。 操作步骤 为集群的每个节点申请弹性公网IP，并将本

查看更多 →

配置Spark对接LakeFormation 使用pyspark时，需要将以下配置中“spark.hadoop”开头的参数去掉“spark.hadoop”后配置到hive-site.xml配置文件中。 对接通用配置 在“spark/conf/spark-defaults.conf”中添加以下配置：

查看更多 →