更新时间:2024-08-08 GMT+08:00
分享

迁移准备

前提条件

  • CDH HBase的版本号小于或等于MRS HBase的版本号。
  • 待迁移的表在迁移过程中不能有写入,Split,Merge等操作。
  • 使用华为云专线搭建CDH集群与华为云VPC之间的专属连接通道。

迁移流程

  1. 预估迁移数据量、迁移时间。
  2. 输出详细待迁移数据表、文件个数、大小,用于后续校验。
  3. 分批配置迁移任务,保证迁移进度与速度。
  4. 校验文件个数以及文件大小。
  5. 在MRS中恢复HBase表并验证。

准备数据

项目

数据项

说明

取值示例

DES盒子

挂载地址

DES盒子在客户的虚拟机挂载的地址。

//虚拟机IP/huawei

存储管理系统

DES盒子的存储管理系统,与管理IP相关。

https://管理IP:8088/deviceManager/devicemanager/login/login.html

用户名

登录存储管理系统的用户名。

admin

密码

登录密码。

-

CDH集群

NameNode IP

客户CDH集群的主NameNode IP。

192.168.2.3

HDFS的端口

一般默认为9000。

9000

HDFS URI

客户CDH集群中HDFS的NameNode URI地址。

hdfs://192.168.2.3:9000

OBS

OBS终端节点

OBS的Endpoint。

obs.cn-north-1.myhuaweicloud.com

OBS桶

存放CDH一个月前历史数据的OBS桶。

cdm

AK/SK

连接OBS的AK/SK。

-

MRS

Manager IP

MRS Manager的IP地址。

192.168.3.11

相关文档