从HBase读取数据再写入HBase 场景说明 Java样例代码 Scala样例代码 父主题： 开发Spark应用

查看更多 →

云 MRS 服务。 HBase数据迁移到华为云MRS服务 本实践使用华为云 CDM 服务将HBase集群中的数据（支持数据量在几十TB级别或以下的数据量级）迁移到华为云MRS服务。HBase会把数据存储在HDFS上，主要包括HFile文件和WAL文件，由配置项“hbase.rootdir

查看更多 →

onnector来说，Map任务分区更均匀，并且不依赖区分列是否有创建索引。 mysql-fastpath-connector：MySQL数据库专用连接器，使用MySQL的mysqldump和mysqlimport工具进行数据的导入导出，相对generic-jdbc-connector来说，导入导出速度更快。

查看更多 →

onnector来说，Map任务分区更均匀，并且不依赖分区列是否有创建索引。 mysql-fastpath-connector：MYSQL数据库专用连接器，使用MYSQL的mysqldump和mysqlimport工具进行数据的导入导出，相对generic-jdbc-connector来说，导入导出速度更快。

查看更多 →

配置和修改 GaussDB (for MySQL)读写内网地址 操作场景 用户从线下或者其他云迁移到云数据库GaussDB(for MySQL)后要面对更改IP的问题，为减少客户业务更改，降低迁移难度。提供规划与更改内网IP方式，降低客户迁移成本。 约束限制 开启读写分离功能后，不允许修改读写内网地址。

查看更多 →

为什么要采用mysqldump和pg_dump工具迁移 该方案优点是简单，容易上手，缺点是停机时间较长。因此它适用于数据量不大，或者允许停机的时间较长，并且在这个时间范围内能够完成的数据。 由于云数据库RDS服务提供的服务与原来的数据库服务是完全兼容的，所以对于用户来说，从原有数

查看更多 →

开发不同的作业访问数据源以实现 DLI 跨源分析。 本节操作介绍DLI支持的数据源对应的开发方式。 使用须知 Flink作业访问DIS，OBS和SMN数据源，无需创建跨源连接，可以直接访问。 推荐使用增强型跨源连接打通DLI与数据源之间的网络。 跨源分析开发方式 表1提供DLI支持的数据源对应的开发方式。

查看更多 →

目前动态生效不支持关闭，数据源动态生效时间默认为60秒。如需修改动态生效时间，请参考3.e修改“coordinator.config.properties”和“worker.config.properties”中的参数“catalog.scanner-interval”值为需要设定的动态生效时间，例如：

查看更多 →

Definer相关概念可参考MySQL官网文档中的说明。 目标数据库的IP地址、端口、用户名和密码将在迁移过程中被加密暂存到数据库和迁移实例主机上，待该任务删除后会永久清除。 在“迁移设置”页面，设置迁移用户和迁移对象等信息，单击“下一步”。 图8 迁移模式 表12 迁移模式和迁移对象 参数 描述

查看更多 →

风险。 目标数据库用户名和密码将在同步过程中被加密暂存到数据库和同步实例主机上，待该任务删除后会永久清除。 在“设置同步”页面，选择数据冲突策略和同步对象，单击“下一步”。 图7 同步模式 表11 同步模式和对象 参数 描述 流速模式 流速模式支持限速和不限速，默认为不限速。限速模式只对全量阶段生效，增量阶段不生效。

查看更多 →

目标数据库IP地址、端口、用户名和密码将在同步过程中被加密暂存到数据库和同步实例主机上，待该任务删除后会永久清除。 在“设置同步”页面，选择数据冲突策略和同步对象，单击“下一步”。 图7 同步模式 表9 同步模式和对象 参数 描述 流速模式 流速模式支持限速和不限速，默认为不限速。限速模式只对全量阶段生效，增量阶段不生效。

查看更多 →

风险。 目标数据库用户名和密码将在同步过程中被加密暂存到数据库和同步实例主机上，待该任务删除后会永久清除。 在“设置同步”页面，选择数据冲突策略和同步对象，单击“下一步”。 图9 同步模式 表12 同步模式和对象 参数 描述 流速模式 流速模式支持限速和不限速，默认为不限速。限速模式只对全量阶段生效，增量阶段不生效。

查看更多 →

源数据库和目标数据库对应的性能参数值改为不一致。 若您想将对比结果不一致的参数改为一致结果，请参考如下流程进行修改： 对齐源库和目标库的参数值。 当源库和目标库对应的参数值出现不一致时，选择需要修改的参数，单击“一键对齐”按钮，系统将帮您自动填充目标数据库的参数值，使其和源库对应的参数值保持一致。

查看更多 →

value1 and column2<= value2) or column3 != value3 过滤条件为like 和 not like，支持前缀，后缀和包含匹配 例如： 1 select * from tableName where column1 like "%value"

查看更多 →

删除HBase表 功能简介 HBase通过org.apache.hadoop.hbase.client.Admin的deleteTable方法来删除表。 代码样例 以下代码片段在com.huawei.bigdata.hbase.examples包的“HBaseExample”类的dropTable方法中。

查看更多 →

Spark on HBase程序 场景说明 Java样例代码 Scala样例代码 父主题： 开发Spark应用

查看更多 →

（4）获取Admin对象，Admin提供了建表、创建列族、检查表是否存在、修改表结构和列族结构以及删除表等功能。 （5）调用Admin的建表方法。 注意事项 注[1] 可以设置列族的压缩方式，代码片段如下： //设置编码算法，HBase提供了DIFF，FAST_DIFF，PREFIX三种编码算法

查看更多 →

修改HBase表 功能简介 HBase通过org.apache.hadoop.hbase.client.Admin的modifyTable方法修改表信息。 代码样例 以下代码片段在com.huawei.bigdata.hbase.examples包的“HBaseSample”类的testModifyTable方法中

查看更多 →

开发HBase应用 HBase数据读写样例程序 HBase全局二级索引样例程序 HBase Rest接口调用样例程序 HBase ThriftServer连接样例程序 HBase访问多个ZooKeeper样例程序 父主题： HBase开发指南（普通模式）

查看更多 →

（4）获取Admin对象，Admin提供了建表、创建列族、检查表是否存在、修改表结构和列族结构以及删除表等功能。 （5）调用Admin的建表方法。 注意事项 注[1] 可以设置列族的压缩方式，代码片段如下： //设置编码算法，HBase提供了DIFF，FAST_DIFF，PREFIX三种编码算法

查看更多 →

删除HBase表 功能简介 HBase通过org.apache.hadoop.hbase.client.Admin的deleteTable方法来删除表。 代码样例 以下代码片段在com.huawei.bigdata.hbase.examples包的“HBaseSample”类的dropTable方法中

查看更多 →