-
为什么给HBase使用的HDFS目录设置quota会造成HBase故障
![]()
org.apache.hadoop.hdfs.server.namenode.DirectoryWithQuotaFeature.verifyQuota(DirectoryWithQuotaFeature.java:239) ?at org.apache.hadoop.hdfs.server
来自：帮助中心 -
启用Yarn CGroups功能限制Container CPU使用率
-
Spark Jar 使用DEW获取访问凭证读写OBS
![]()
secretName= CredentialName spark.hadoop.fs.dew.endpoint=ENDPOINT spark.hadoop.fs.dew.csms.version=VERSION_ID spark.hadoop.fs.dew.csms.cache.time.second
来自：帮助中心 -
配置Doris对接Hive数据源
![]()
principal' = 'mapred/hadoop.hadoop.com@HADOOP.COM', 'hive.metastore.kerberos.principal' = 'hive/hadoop.hadoop.com@HADOOP.COM', 'hadoop.security.authentication'
来自：帮助中心 -
HMaster日志中频繁打印出FileNotFoundException信息
![]()
1936] ?at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.checkLease(FSNamesystem.java:3432) ?at org.apache.hadoop.hdfs.server.namenode.FSNamesystem
来自：帮助中心 -
多CPU内核下MapReduce调优配置
![]()
DFS/hadoop/etc/hadoop/hdfs-site.xml。 Yarn客户端配置文件路径：客户端安装目录/HDFS/hadoop/etc/hadoop/yarn-site.xml。 MapReduce客户端配置文件路径：客户端安装目录/HDFS/hadoop/etc/hadoop/mapred-site
来自：帮助中心 -
多CPU内核下的MapReduce调优配置
![]()
DFS/hadoop/etc/hadoop/hdfs-site.xml。 Yarn客户端配置文件路径：客户端安装目录/HDFS/hadoop/etc/hadoop/yarn-site.xml。 MapReduce客户端配置文件路径：客户端安装目录/HDFS/hadoop/etc/hadoop/mapred-site
来自：帮助中心 -
如何在导入Hive表时指定输出的文件压缩格式？
![]()
apache.hadoop.io.compress.BZip2Codec org.apache.hadoop.io.compress.Lz4Codec org.apache.hadoop.io.compress.DeflateCodec org.apache.hadoop.io.compress
来自：帮助中心 -
计算与缓存服务安装
-
ZooKeeper开源增强特性
![]()
CommitProcWorkThread-4 | session=0x12000007553b4903?user=10.177.223.78,zkcli/hadoop.hadoop.com@HADOOP.COM?ip=10.177.223.78?operation=create znode?target=ZooKeeperServer
来自：帮助中心 -
HMaster日志中频繁打印出FileNotFoundException信息
![]()
1936] ?at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.checkLease(FSNamesystem.java:3432) ?at org.apache.hadoop.hdfs.server.namenode.FSNamesystem
来自：帮助中心 -
配置HDFS通过Guardian访问OBS
![]()
obs://OBS并行文件系统名称/hadoop 使用以下命令上传客户端节点“/opt/test.txt”文件到“obs://OBS并行文件系统名称/hadoop”路径下。 hdfs dfs -put /opt/test.txt obs://OBS并行文件系统名称/hadoop OBS文件系统打印
来自：帮助中心 -
HDFS Shell命令介绍
![]()
SHELL 操作格式：hadoop fs <args> 直接输入命令即可。例如： 查看对应目录下内容 hadoop fs -ls /tmp/input/ 创建目录 hadoop fs -mkdir /tmp/input/new_dir 查看文件内容 hadoop fs -cat /tmp/input/file1
来自：帮助中心 -
如何修改HDFS主备倒换类？
![]()
xx.jar到程序的classpath或者lib目录中。 hadoop-plugins-xxx.jar包一般在HDFS客户端目录下：$HADOOP_HOME/share/hadoop/common/lib/hadoop-plugins-xxx.jar 方式二：将HDFS的如下配置项修改为开源类。
来自：帮助中心 -
HBase HFS Java API接口介绍
![]()
org.apache.hadoop.hbase.filestream.client.FSTable是org.apache.hadoop.hbase.filestream.client.FSTableInterface接口的实现类。 org.apache.hadoop.hbase.filestream
来自：帮助中心 -
DataX对接OBS
![]()
解压datax.tar.gz到/opt/datax目录。 在Github下载hadoop-huaweicloud：下载地址。（建议使用hadoop 2.8.3版本下最新版本的hadoop-huaweicloud版本，例如hadoop-huaweicloud-2.8.3-hw-53.8，以最新版本为准）
来自：帮助中心 -
连接postgresql或者gaussdb时报错
![]()
import命令时，会启动MapReduce任务，由于MRS Hadoop安装目录（/opt/Bigdata/ FusionInsight _HD_*/1_*_NodeManager/install/hadoop/share/hadoop/common/lib）下自带了postgre驱动包gsjdbc4-*
来自：帮助中心 -
启用Yarn CGroups功能限制Container CPU使用率
![]()
有关如何配置CPU隔离与安全的CGroups功能的详细信息，请参见Hadoop官网： MRS 3.2.0之前版本：http://hadoop.apache.org/docs/r3.1.1/hadoop-yarn/hadoop-yarn-site/NodeManagerCgroups.html
来自：帮助中心 -
重启YARN，本地日志不被删除
![]()
0之前版本：https://hadoop.apache.org/docs/r3.1.1/hadoop-yarn/hadoop-yarn-site/NodeManager.html#NodeManager_Restart MRS 3.2.0及之后版本：https://hadoop.apache.org/docs/r3
来自：帮助中心 -
获取MRS集群信息
![]()
混合集群包含的组件有：Hadoop,Spark2x,HBase,Hive,Hue,Loader,Flink,Oozie,ZooKeeper,HetuEngine,Ranger,Tez,Kafka,Flume,Guardian 自定义集群包含的组件有：CDL,Hadoop,Spark2x
来自：帮助中心 -
执行balance常见问题定位方法
![]()
file:/opt/client/HDFS/hadoop/etc/hadoop/log4j.properties for changes with interval : 60000 org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security
来自：帮助中心
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
