更新时间：2024-08-08 GMT+08:00
迁移准备
前提条件
- CDH HBase的版本号小于或等于MRS HBase的版本号。
- 待迁移的表在迁移过程中不能有写入，Split，Merge等操作。
- 使用华为云专线搭建CDH集群与华为云VPC之间的专属连接通道。
迁移流程
- 预估迁移数据量、迁移时间。
- 输出详细待迁移数据表、文件个数、大小，用于后续校验。
- 分批配置迁移任务，保证迁移进度与速度。
- 校验文件个数以及文件大小。
- 在MRS中恢复HBase表并验证。
准备数据
|
项目 |
数据项 |
说明 |
取值示例 |
|---|---|---|---|
|
DES盒子 |
挂载地址 |
DES盒子在客户的虚拟机挂载的地址。 |
//虚拟机IP/huawei |
|
存储管理系统 |
DES盒子的存储管理系统，与管理IP相关。 |
https://管理IP:8088/deviceManager/devicemanager/login/login.html |
|
|
用户名 |
登录存储管理系统的用户名。 |
admin |
|
|
密码 |
登录密码。 |
- |
|
|
CDH集群 |
NameNode IP |
客户CDH集群的主NameNode IP。 |
192.168.2.3 |
|
HDFS的端口 |
一般默认为9000。 |
9000 |
|
|
HDFS URI |
客户CDH集群中HDFS的NameNode URI地址。 |
hdfs://192.168.2.3:9000 |
|
|
OBS |
OBS终端节点 |
OBS的Endpoint。 |
obs.cn-north-1.myhuaweicloud.com |
|
OBS桶 |
存放CDH一个月前历史数据的OBS桶。 |
cdm |
|
|
AK/SK |
连接OBS的AK/SK。 |
- |
|
|
MRS |
Manager IP |
MRS Manager的IP地址。 |
192.168.3.11 |
父主题： 车联网大数据零丢失搬迁入湖
