HDFS样例程序开发思路 场景说明 HDFS的业务操作对象是文件，代码样例中所涉及的文件操作主要包括创建文件夹、写文件、追加文件内容、读文件和删除文件/文件夹；HDFS还有其他的业务处理，例如设置文件权限等，其他操作可以在掌握本代码样例之后，再扩展学习。 本代码样例讲解顺序为： HDFS初始化

查看更多 →

创建HDFS权限角色 操作场景 该任务指导 MRS 集群管理员在 FusionInsight Manager创建并设置HDFS的角色。HDFS角色可设置HDFS目录或文件的读、写和执行权限。 用户在HDFS中对自己创建的目录或文件拥有完整权限，可直接读取、写入以及授权他人访问此HDFS目录与文件。

查看更多 →

HDFS应用开发建议 HDFS的读写文件注意点 HDFS不支持随机读和写。 HDFS追加文件内容只能在文件末尾添加，不能随机添加。 只有存储在HDFS文件系统中的数据才支持append，edit.log以及数据元文件不支持Append。Append追加文件时，需要将“hdfs-site

查看更多 →

innodb顺序预读页数 该指标用于统计innodb顺序预读页数。 ≥0 Pages 测量对象：数据库 监控实例类型： GaussDB (for MySQL)实例 gaussdb_mysql115_innodb_bufpool_read_ahead_evicted innodb顺序预读，但未访问过的页数

查看更多 →

创建HDFS权限角色 操作场景 该任务指导MRS集群管理员在FusionInsight Manager创建并设置HDFS的角色。HDFS角色可设置HDFS目录或文件的读、写和执行权限。 用户在HDFS中对自己创建的目录或文件拥有完整权限，可直接读取、写入以及授权他人访问此HDFS目录与文件。

查看更多 →

Postgresql 13.12 128865 1351351（并发度：30） 表2 写入性能实测数据 数据源 数据源规格 版本 单并发写入速率 （行/s） 多并发写入速率 （行/s） 云数据库 MySQL 8U 32G MySQL 5.7 2658 / Oracle 8U 16G 19C / / MRS

查看更多 →

恢复HDFS业务数据 操作场景 在用户意外修改、删除或需要找回数据时，系统管理员对HDFS进行重大操作（如升级、重大数据调整等）后，系统数据出现异常或未达到预期结果，模块全部故障无法使用，或者迁移数据到新集群的场景中，需要对HDFS进行恢复数据操作。 系统管理员可以通过FusionInsight

查看更多 →

点之间用DRS进行数据同步，保证数据一致。 读操作：同步路由到active的mysql。 写操作：同步路由到active的mysql。 local-read-single-write 本地读单写适用于读多写少场景，读操作会根据路由算法读取近端节点，写操作遵循写入至active节点

查看更多 →

选择左侧导航栏的“运维数据开发 > 数据开发”，进入“数据开发”页面。 单击“数据管理 > HDFS”，进入HDFS页面。 单击“新建HDFS路径”，进入New HDFS Path页面。 配置HDFS参数，参数说明如表1所示。配置完成后，单击“确定”。 表1 新建HDFS路径参数说明 参数名称

查看更多 →

备份HDFS业务数据 操作场景 为了确保HDFS日常用户的业务数据安全，或者系统管理员需要对HDFS进行重大操作（如升级或迁移等），需要对HDFS数据进行备份，从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复，将对业务的影响降到最低。 系统管理员可以通过FusionInsight

查看更多 →

本代码样例讲解顺序为： HDFS初始化 初始化HDFS 写文件 写HDFS文件 追加文件内容 追加HDFS文件内容 读文件 读HDFS文件 删除文件 删除HDFS文件 Colocation HDFS Colocation 设置存储策略 设置HDFS存储策略 访问OBS HDFS访问OBS 开发思路

查看更多 →

Postgresql 13.12 128865 1351351（并发度：30） 表2 写入性能实测数据 数据源 数据源规格 版本 单并发写入速率 （行/s） 多并发写入速率 （行/s） 云数据库 MySQL 8U 32G MySQL 5.7 2658 / Oracle 8U 16G 19C / / MRS

查看更多 →

选择左侧导航栏的“运维数据开发 > 数据开发”，进入“数据开发”页面。 单击“数据管理 > HDFS”，进入HDFS页面。 单击“新建HDFS路径”，进入New HDFS Path页面。 配置HDFS参数，参数说明如表1所示。配置完成后，单击“确定”。 表1 新建HDFS路径参数说明 参数名称

查看更多 →

向Phoenix表中写入数据 功能简介 使用Phoenix实现写数据。 代码样例 以下代码片段在com.huawei.bigdata.hbase.examples包的“PhoenixSample”类的testPut方法中。 /** * Put data */ public

查看更多 →

gaussdb_mysql339_taurus_sal_flow_control_instance_read_page_throttle 读流控 用于监控实例是否触发读流控，大于0表示触发读流控，数值表示限流的ReadPage个数。 ≥0 GaussDB(for MySQL)实例 1分钟

查看更多 →

输入便于记忆和区分的连接名称。 mysqllink 数据库 服务器 MySQL数据库的IP地址或 域名 。 192.168.1.110 端口 MySQL数据库的端口。 3306 数据库名称 MySQL数据库的名称。 sqoop 用户名 拥有MySQL数据库的读、写和删除权限的用户。 admin

查看更多 →

HDFS读文件失败报错“No common protection layer” 问题背景与现象 shell客户端或者其他客户端操作HDFS失败，报“No common protection layer between client and server”。 在集群外的机器，执行任意hadoop命令，如hadoop

查看更多 →

为什么HBase无法写入数据？ 问题现象 HBase无法写入数据，导致应用侧业务数据无法及时更新。 原因分析 Zookeeper连接数过多。 处理方法 建议业务代码连接同一个CloudTable HBase集群时，多线程创建并复用同一个Connection，不必每个线程都创建各自

查看更多 →

Flume数据写入组件失败 问题现象 Flume进程启动后，Flume数据无法写入到对应组件（本示例以服务端写入到HDFS为例）。 原因分析 HDFS未启动或故障。 查看Flume运行日志： 2019-02-26 11:16:33,564 | ERROR | [SinkRunne

查看更多 →

对于RDS for MySQL实例来说，开启读写分离后，会将主实例的读权重设置为100，您可以根据业务需求自行调整主实例和只读实例的读权重。 对于GaussDB(for MySQL)实例来说，开启读写分离后需要您根据业务需求自行调整主实例和只读实例的读权重。 由于只读实例的数据是从主实例异步复制过来的，可能存在可见性延迟。

查看更多 →

该指标用于统计读命中与读请求数比例，以比率为单位。 0-1 测量对象：数据库 监控实例类型：MySQL实例 rds012_innodb_buf_dirty 缓冲池脏块率 该指标用于统计InnoDB缓存中脏数据与InnoDB缓存中使用的页比例，以比率为单位。 0-1 测量对象：数据库 监控实例类型：MySQL实例

查看更多 →