在 FusionInsight Manager首页，选择“集群 > 服务 > HDFS > 配置 > 全部配置”，搜索并获取参数“dfs.namenode.rpc.port”的值。 访问的HDFS文件路径： 如果是访问的多个文件，需要指定到文件夹后边加上*号，如：hdfs://{namenode_ip}:{dfs

查看更多 →

创建HDFS文件并写入内容 功能简介 写文件过程为： 使用FileSystem实例的create方法获取写文件的输出流。 使用该输出流将内容写入到HDFS的指定文件中。 在写完文件后，需关闭所申请资源。 代码样例 如下是写文件的代码片段，详细代码请参考com.huawei.bigdata

查看更多 →

driver 挂载依赖的存储驱动，文件存储配置为“huawei.com/fuxinfs”。 deviceMountPath 文件存储的共享路径。 获取方法：在CCE控制台，单击顶部的“服务列表 > 存储 > 弹性文件服务”，在弹性文件服务列表中可以看到“挂载地址”列，即为文件存储的共享路径，如图1。

查看更多 →

底层存储是否支持。 约束与限制 挂载参数暂不支持安全容器。 由于NFS协议限制，默认情况下，对于某个节点多次挂载同一文件存储的场景，涉及链路的挂载参数（如timeo）仅在第一次挂载时生效。例如，节点上运行的多个Pod同时挂载同一文件存储，后设置的挂载参数不会覆盖已有参数值。针对上

查看更多 →

无需填写 表示是否保留文件挂载点的ownership。 默认为不添加该参数，此时挂载极速文件存储时将会默认把挂载点的ownership修改为root:root。 如添加该参数，挂载极速文件存储时将保持文件系统原有的ownership。 vers 3 文件系统版本，目前只支持NFSv3。取值：3

查看更多 →

需要Kerberos客户端、keytab路径、Kerberos认证用户名称、客户端配置krb5.conf文件。 原理结构图 Kerberos原理架构图如下图所示，详细介绍请参见 MRS 服务的安全认证原理以及认证机制章节。 图1 原理架构图 表1 参数说明 参数 说明 Application Client 应用客

查看更多 →

输入挂载参数键值对，详情请参见设置极速文件存储挂载参数。 a：创建方式选择“已有存储卷”时可设置。 b：创建方式选择“新建存储卷”时可设置。 单击“创建”，将同时为您创建存储卷声明和存储卷。 您可以在左侧导航栏中选择“存储”，在“存储卷声明”和“存储卷”页签下查看已经创建的存储卷声明和存储卷。 创建应用。

查看更多 →

创建HDFS文件并写入内容 功能简介 写文件过程为： 使用FileSystem实例的create方法获取写文件的输出流。 使用该输出流将内容写入到HDFS的指定文件中。 在写完文件后，需关闭所申请资源。 代码样例 如下是写文件的代码片段，详细代码请参考com.huawei.bigdata

查看更多 →

配置HDFS文件回收站机制 配置场景 在HDFS中，如果删除HDFS的文件，删除的文件将被移动到回收站（trash）中，不会被立即清除，以便在误操作的情况下恢复被删除的数据。被删除的文件在超过老化时间后将变为老化文件，会基于系统机制清除或用户手动清除。 您可以设置文件保留在回收站

查看更多 →

创建HDFS文件并写入内容 功能简介 写文件过程为： 使用FileSystem实例的create方法获取写文件的输出流。 使用该数据流将内容写入到HDFS的指定文件中。 在写完文件后，需关闭所申请资源。 代码样例 如下是写文件的代码片段，详细代码请参考com.huawei.bigdata

查看更多 →

输入挂载参数键值对，详情请参见设置极速文件存储挂载参数。 a：创建方式选择“已有存储卷”时可设置。 b：创建方式选择“新建存储卷”时可设置。 单击“创建”，将同时为您创建存储卷声明和存储卷。 您可以在左侧导航栏中选择“存储”，在“存储卷声明”和“存储卷”页签下查看已经创建的存储卷声明和存储卷。 创建应用。

查看更多 →

如何新建业务架构图？ 操作步骤 登录管理控制台。 选择“服务列表 > 管理与监管 > 优化顾问”优化顾问服务页面。 左侧导航树选择“架构设计”。 点击“新建业务架构”创建架构图，创建好的业务架构图列表默认为卡片视图。需要填写架构名称，选择架构类型（对画图无影响），填写描述，选择部署情况（对画图无影响）。

查看更多 →

待迁移的存量数据及数据量统计 如果使用HDFS作为文件存储系统，可以通过客户端执行hadoop fs -du -h HDFS文件目录命令统计路径下的文件大小。 表4 现有数据量统计 大数据组件 待迁移数据的路径 数据量大小 文件个数或表个数 HDFS/OBS（或其他文件存储系统） /user/helloworld

查看更多 →

输入挂载参数键值对，详情请参见设置极速文件存储挂载参数。 a：创建方式选择“已有存储卷”时可设置。 b：创建方式选择“新建存储卷”时可设置。 单击“创建”，将同时为您创建存储卷声明和存储卷。 您可以在左侧导航栏中选择“存储”，在“存储卷声明”和“存储卷”页签下查看已经创建的存储卷声明和存储卷。 创建应用。

查看更多 →

ALM-14006 HDFS文件数超过阈值 告警解释 系统每30秒周期性检测HDFS文件数，并把实际文件数和阈值相比较。当检测到HDFS文件数指标超出阈值范围时产生该告警。 平滑次数为1，HDFS文件数指标的值小于或等于阈值时，告警恢复；平滑次数大于1，HDFS文件数指标的值小于或等于阈值的90%时，告警恢复。

查看更多 →

kubernetes.io/storage-class 文件存储类型，当前支持标准文件协议类型（nfs-rw）。 name 创建的PVC名称。 accessModes 只支持ReadWriteMany，不支持ReadWriteOnly。 storage 存储容量，单位为Gi。 执行如下命令创建PVC。

查看更多 →

384 MB 可能原因 目录配置的剩余的空间小于写文件实际需要的空间。 原因分析 HDFS支持设置某目录的配额，即限制某目录下的文件最多占用空间大小，例如如下命令是设置“/tmp/tquota”目录最多写入150MB的文件（文件大小*副本数）。 hadoop dfsadmin -setSpaceQuota

查看更多 →

使用Hue WebUI访问HDFS文件失败 问题 在使用Hue WebUI访问HDFS文件时，报如下图所示无法访问的错误提示，该如何处理？ 回答 查看登录Hue WebUI的用户是否具有“hadoop”用户组权限。 查看HDFS服务是否安装了HttpFS实例且运行正常。如果未安装

查看更多 →

期”信息。 单击文件名，可查看文本文件的文本信息或二进制数据。支持编辑文件内容。 如果文件和目录数量比较多，可以在搜索框输入关键字，搜索特定的文件或目录。 创建文件或目录 单击右上角的“新建”，选择“文件”创建文件，选择“目录”创建目录。 管理文件或目录 勾选文件或目录的复选框，

查看更多 →

HDFS客户端写文件close失败 问题背景与现象 HDFS客户端写文件close失败，客户端提示数据块没有足够副本数。 客户端日志： 2015-05-27 19:00:52.811 [pool-2-thread-3] ERROR: /tsp/nedata/collect/UGW

查看更多 →

使用Hue WebUI访问HDFS文件失败 问题 在使用Hue WebUI访问HDFS文件时，报如下图所示无法访问的错误提示，该如何处理？ 回答 查看登录Hue WebUI的用户是否具有“hadoop”用户组权限。 查看HDFS服务是否安装了HttpFS实例且运行正常。如果未安装

查看更多 →