更新时间:2026-03-27 GMT+08:00
分享

大数据迁移项目功能概述

大数据迁移项目提供了元数据采集、大数据迁移和大数据校验功能。详细功能介绍请参见表1

表1 大数据迁移项目功能概述

功能

功能介绍

须知

迁移工具中心

迁移工具中心旨在解决用户在大数据迁移过程中对多样化工具、迁移路径及迁移后数据校验的需求。通过集成华为云服务、合作伙伴工具和开源工具,扩展了大数据迁移路径,覆盖IDC、阿里云、AWS等源端位置,提供更全面的大数据迁移和校验解决方案,以满足用户的多样化需求。

-

迁移任务中心

迁移任务中心是一个用于集中管理迁移任务的功能模块。其主要作用是帮助用户监控和管理已经完成配置并启动的迁移任务。

迁移准备

在进行大数据迁移和校验之前,需要完成以下准备工作:下载并安装迁移中心Agent,创建元数据连接,利用该连接创建元数据同步任务,将源端数据库的库、表、字段信息同步至迁移中心。

数据迁移

将阿里云MaxCompute的数据迁移至华为云数据湖探索(DLI),支持元数据的全量迁移和增量感知,以及全量数据和增量数据的迁移。

有关数据迁移的约束限制和注意事项,请参见使用须知

数据校验

迁移中心为多种大数据计算和存储引擎,如Hive、Hbase、Doris和MaxCompute 等,提供了一致性校验方法。通过一致性校验,您可以更加放心地进行大数据迁移操作,确保数据的准确性和可靠性,从而避免数据丢失或不一致的风险。

有关数据校验的注意事项、约束限制及校验方式的说明,请参见大数据校验概述

相关文档