-
安装Spark
![]()
spark.hadoop.fs.obs.threads.read.core=500 spark.hadoop.fs.obs.threads.read.max=1000 spark.hadoop.fs.obs.write.buffer.size=8192 spark.hadoop.fs.obs
来自：帮助中心 -
调整HDFS SHDFShell客户端日志级别
-
执行Kafka Topic删除操作时提示“AdminOperationException”
![]()
test@HADOOP.COM Valid starting Expires Service principal 01/25/17 11:06:48 01/26/17 11:06:45 krbtgt/HADOOP.COM@HADOOP.COM 如上例中当前认证用户为test。
来自：帮助中心 -
为什么DataNode无法正常上报数据块
![]()
limit. at org.apache.hadoop.hdfs.protocol.BlockListAsLongs$BufferDecoder$1.next(BlockListAsLongs.java:369) at org.apache.hadoop.hdfs.protocol.Bl
来自：帮助中心 -
HDFS客户端常见命令说明
![]()
更多HDFS命令行参考请参见官网：http://hadoop.apache.org/docs/r3.1.1/hadoop-project-dist/hadoop-common/FileSystemShell.html 表1 透明加密相关命令 场景 操作 命令 描述 Hadoop Shell命令管理密钥 创建密钥
来自：帮助中心 -
执行Kafka Topic创建操作时发现无法创建提示“NoAuthException”
![]()
test@HADOOP.COM Valid starting Expires Service principal 01/25/17 11:06:48 01/26/17 11:06:45 krbtgt/HADOOP.COM@HADOOP.COM 如上例中当前认证用户为test。
来自：帮助中心 -
MRS集群用户账号一览表
-
节点内DataNode磁盘使用率不均衡
![]()
/srv/BigData/hadoop/data1 /dev/xvdc 700G 900G 200G 78% /srv/BigData/hadoop/data2 /dev/xvdd 700G 900G 200G 78% /srv/BigData/hadoop/data3 /dev/xvde
来自：帮助中心 -
为什么给HBase使用的HDFS目录设置quota会造成HBase故障
![]()
org.apache.hadoop.hdfs.server.namenode.DirectoryWithQuotaFeature.verifyQuota(DirectoryWithQuotaFeature.java:239) ?at org.apache.hadoop.hdfs.server
来自：帮助中心 -
为什么给HBase使用的HDFS目录设置quota会造成HBase故障
![]()
org.apache.hadoop.hdfs.server.namenode.DirectoryWithQuotaFeature.verifyQuota(DirectoryWithQuotaFeature.java:239) ?at org.apache.hadoop.hdfs.server
来自：帮助中心 -
启用Yarn CGroups功能限制Container CPU使用率
-
HDFS Shell命令介绍
![]()
/opt/client/HDFS/hadoop/bin ./hdfs dfs -mkdir /tmp/input 执行如下命令查询HDFS命令的帮助。 ./hdfs --help HDFS命令行参考请参见官网： http://hadoop.apache.org/docs/r3.1.1/hadoop-pro
来自：帮助中心 -
在本地Windows环境中调测MapReduce应用
![]()
3614 [main] INFO org.apache.hadoop.hdfs.PeerCache - SocketCache disabled. 10159 [main] INFO org.apache.hadoop.mapreduce.lib.input.FileInputFormat
来自：帮助中心 -
Flink Jar 使用DEW获取访问凭证读写OBS
![]()
secretName=CredentialName flink.hadoop.fs.dew.endpoint=ENDPOINT flink.hadoop.fs.dew.csms.version=VERSION_ID flink.hadoop.fs.dew.csms.cache.time.second=CACHE_TIME
来自：帮助中心 -
ResourceManager进行主备切换后，任务中断后运行时间过长
![]()
0之前版本：http://hadoop.apache.org/docs/r3.1.1/hadoop-yarn/hadoop-yarn-site/ResourceManagerRestart.html MRS 3.2.0及之后版本：https://hadoop.apache.org/docs/r3
来自：帮助中心 -
ResourceManager进行主备切换后，任务中断后运行时间过长
![]()
0之前版本：http://hadoop.apache.org/docs/r3.1.1/hadoop-yarn/hadoop-yarn-site/ResourceManagerRestart.html MRS 3.2.0及之后版本：https://hadoop.apache.org/docs/r3
来自：帮助中心 -
如何在导入Hive表时指定输出的文件压缩格式？
![]()
apache.hadoop.io.compress.BZip2Codec org.apache.hadoop.io.compress.Lz4Codec org.apache.hadoop.io.compress.DeflateCodec org.apache.hadoop.io.compress
来自：帮助中心 -
计算与缓存服务安装
-
客户端查询HBase出现SocketTimeoutException异常
![]()
at org.apache.hadoop.hbase.client.ScannerCallableWithReplicas.call(ScannerCallableWithReplicas.java:223) at org.apache.hadoop.hbase.client.S
来自：帮助中心 -
Hive与其他组件的关系
![]()
Hive与HDFS组件的关系 Hive是Apache的Hadoop项目的子项目，Hive利用HDFS作为其文件存储系统。Hive通过解析和计算处理结构化的数据，Hadoop HDFS则为Hive提供了高可靠性的底层存储支持。Hive数据库中的所有数据文件都可以存储在Hadoop HDFS文件系统上，Hive所有的数据操作也都是通过Hadoop
来自：帮助中心 -
Ranger界面添加或者修改HBase策略时，无法使用通配符搜索已存在的HBase表
![]()
org.apache.hadoop.hbase.security.AbstractHBaseSaslRpcClient.evaluateChallenge(AbstractHBaseSaslRpcClient.java:142) at org.apache.hadoop.hbase.security
来自：帮助中心
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
