支持的数据源（2.10.0.300）

数据仓库

数据仓库服务（DWS）

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI），MRS ClickHouse，Doris
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server，MySQL，PostgreSQL，Microsoft SQL Server，Oracle
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

不支持DWS物理机纳管模式。

数据湖探索（DLI）

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI），MRS ClickHouse，Doris
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server，MySQL，PostgreSQL，Microsoft SQL Server，Oracle
• NoSQL：MongoDB
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

MongoDB建议使用的版本：4.2。

用户需要具备DLI数据源所有字段的“查询表”权限，即SELECT权限。

MRS ClickHouse

数据仓库：MRS ClickHouse，数据湖探索（DLI）

• MRS ClickHouse建议使用的版本：21.3.4.X。

• 当前暂不支持对接“Kerberos加密类型”为“aes256-sha2,aes128-sha2”的MRS集群。如需对接MRS集群，请注意“Kerberos加密类型”应为“aes256-sha1,aes128-sha1”。

Doris

数据仓库：Doris

当前暂不支持对接“Kerberos加密类型”为“aes256-sha2,aes128-sha2”的MRS集群。如需对接MRS集群，请注意“Kerberos加密类型”应为“aes256-sha1,aes128-sha1”。

Hadoop

MRS HDFS

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server，MySQL，PostgreSQL，Microsoft SQL Server，Oracle
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

• 支持本地存储，仅MRS Hive、MRS Hudi支持存算分离场景。
• 仅MRS Hive支持Ranger场景。
• 不支持ZK开启SSL场景。
• MRS HDFS建议使用的版本：
  • 2.8.X
  • 3.1.X
• MRS HBase建议使用的版本：
  • 2.1.X
  • 1.3.X
• MRS Hive、MRS Hudi暂不支持2.x版本，建议使用的版本：
  • 1.2.X
  • 3.1.X

• 当前暂不支持对接“Kerberos加密类型”为“aes256-sha2,aes128-sha2”的MRS集群。如需对接MRS集群，请注意“Kerberos加密类型”应为“aes256-sha1,aes128-sha1”。

MRS HBase

MRS Hive

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI），MRS Clickhouse、Doris
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server，MySQL，PostgreSQL，Microsoft SQL Server，Oracle
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable），SAP HANA

MRS Hudi

• 数据仓库：数据仓库服务（DWS）
• Hadoop：MRS HBase

Apache HBase

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

• Apache数据源不支持作为目的端。
• 仅支持本地存储，不支持存算分离场景。
• 不支持Ranger场景。
• 不支持ZK开启SSL场景。
• Apache HBase建议使用的版本：
  • 2.1.X
  • 1.3.X
• Apache Hive暂不支持2.x版本，建议使用的版本：
  • 1.2.X
  • 3.1.X
• Apache HDFS建议使用的版本：
  • 2.8.X
  • 3.1.X

Apache Hive

Apache HDFS

对象存储

对象存储服务（OBS）

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

• 对象存储服务之间的迁移，推荐使用对象存储迁移服务OMS。
• 不支持二进制文件导入到数据库或NoSQL。

文件系统

FTP

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 搜索：Elasticsearch
• 对象存储：对象存储服务（OBS）
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

• 文件系统不支持作为目的端。
• FTP/SFTP到搜索的迁移仅支持如CSV等文本文件，不支持二进制文件。
• FTP/SFTP到OBS的迁移仅支持二进制文件。
• HTTP到OBS的迁移推荐使用obsutil工具，请参见obsutil简介。

SFTP

HTTP

Hadoop：MRS HDFS

关系型数据库

云数据库 MySQL

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI），Doris
• Hadoop：MRS HDFS，MRS HBase，MRS Hive，MRS Hudi
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable），SAP HANA

• OLTP数据库之间的迁移推荐通过数据复制服务DRS进行迁移。
• Microsoft SQL Server建议使用的版本：2005以上。
• Greenplum、金仓、GaussDB数据源可通过PostgreSQL连接器进行连接，支持的迁移作业的源端、目的端情况与PostgreSQL数据源一致。

云数据库 SQL Server

• 数据仓库：数据仓库服务（DWS）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

云数据库 PostgreSQL

MySQL

• 数据仓库：数据仓库服务（DWS）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive，MRS Hudi
• 对象存储：对象存储服务（OBS）
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

PostgreSQL

Oracle

Microsoft SQL Server

• 数据仓库：数据仓库服务（DWS）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

NoSQL

分布式缓存服务（DCS）

• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）

NoSQL数据源不支持作为目的端。

Redis到DCS的迁移，可以通过其他方式进行，请参见自建Redis迁移至DCS。

Redis

MongoDB

消息系统

数据接入服务（DIS）

公测中：云搜索服务（CSS）

消息系统不支持作为目的端。

Apache Kafka

DMS Kafka

MRS Kafka

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server
• 搜索：Elasticsearch，
• 公测中：表格存储服务（CloudTable），云搜索服务（CSS）

• MRS Kafka不支持作为目的端。
• 仅支持本地存储，不支持存算分离场景。
• 不支持Ranger场景。
• 不支持ZK开启SSL场景。

• 当前暂不支持对接“Kerberos加密类型”为“aes256-sha2,aes128-sha2”的MRS集群。如需对接MRS集群，请注意“Kerberos加密类型”应为“aes256-sha1,aes128-sha1”。

搜索

Elasticsearch

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server
• 搜索：Elasticsearch
• 公测中：表格存储服务（CloudTable），云搜索服务（CSS）

Elasticsearch仅支持非安全模式。

公测中

表格存储服务（CloudTable HBase）

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server，MySQL，PostgreSQL，Microsoft SQL Server，Oracle
• 搜索：Elasticsearch
• 公测中：表格存储服务（CloudTable），云搜索服务（CSS）

-

云搜索服务（CSS）

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 关系型数据库：云数据库 MySQL，云数据库 PostgreSQL，云数据库 SQL Server
• 搜索：Elasticsearch
• 公测中：表格存储服务（CloudTable），云搜索服务（CSS）

导入数据到CSS推荐使用Logstash，请参见使用Logstash导入数据到Elasticsearch。

SAP HANA

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS Hive

FusionInsight HDFS

• 数据仓库：数据仓库服务（DWS），数据湖探索（DLI）
• Hadoop：MRS HDFS，MRS HBase，MRS Hive
• 对象存储：对象存储服务（OBS）
• 搜索：Elasticsearch
• 公测中：云搜索服务（CSS），表格存储服务（CloudTable）

• FusionInsight数据源不支持作为目的端。
• 仅支持本地存储，不支持存算分离场景。
• 不支持Ranger场景。
• 不支持ZK开启SSL场景。
• FusionInsight HDFS建议使用的版本：
  • 2.8.X
  • 3.1.X
• FusionInsight HBase建议使用的版本：
  • 2.1.X
  • 1.3.X
• FusionInsight Hive建议使用的版本：
  • 1.2.X
  • 3.1.X

FusionInsight HBase

FusionInsight Hive

分库

• 分库数据仓库：数据湖探索（DLI）
• Hadoop：MRS HBase，MRS Hive

• 搜索：Elasticsearch

• 对象存储：对象存储服务（OBS）
• 公测中：云搜索服务（CSS）

分库数据源不支持作为目的端。

达梦数据库 DM

• 数据仓库：数据仓库服务（DWS）
• Hadoop：MRS Hive，MRS Hudi

-

神通（ST）

Hadoop：MRS Hive，MRS Hudi

-

文档数据库服务（DDS）

Hadoop：MRS HDFS，MRS HBase，MRS Hive

-

RestFul API

数据仓库：数据仓库服务（DWS）

目前，仅24.4.x & 2.10.0.400及其后续版本的CDM集群支持该链路，其他版本请以界面功能为准。

-

GBASE8S

• Hadoop：MRS HDFS，MRS HBase
• 消息系统：MRS Kafka

-

GBASE8A

• Hadoop：MRS HDFS，MRS Hive，MRS HBase
• 消息系统：MRS Kafka

-