实时迁移性能实测数据
数据集成实时链路性能指标仅用于参考,实际环境会受源或目标数据源性能、网络带宽及时延、数据及业务模型等因素影响。建议您在正式迁移前,先用小数据量实测进行速度验证。
场景说明
- Migration资源组配置为64CUs规格(Flink版本为1.15)。
- 在性能测试中,表数据量均为5000万行,其中MySQL和Oracle作为源端时字段长度为14列,PostgreSQL作为源端时字段长度为16列。
实测结果
常见链路的性能测试数据结果如表1所示。
链路 |
迁移场景 |
并发数 |
源端版本/规格 |
目的端版本/规格 |
表列数 |
单行长度 (Byte) |
作业输入速率 (MB/s) |
作业字节速率 (rec/s) |
---|---|---|---|---|---|---|---|---|
MySQL > DWS |
增量 |
1 |
MySQL 8.0/2U4G |
DWS 8.1.3/4U32G |
14 |
152 |
0.8 |
5535 |
全量+增量 |
1 |
MySQL 8.0/2U4G |
DWS 8.1.3/4U32G |
14 |
152 |
0.9 |
5851 |
|
增量 |
5 |
MySQL 8.0/2U4G |
DWS 8.1.3/4U32G |
14 |
152 |
2.2 |
15303 |
|
全量+增量 |
5 |
MySQL 8.0/2U4G |
DWS 8.1.3/4U32G |
14 |
152 |
2.8 |
19396 |
|
MySQL > Hudi |
增量 |
1 |
MySQL 8.0/2U4G |
MRS 3.2.0-LTS.1 |
14 |
152 |
1.3 |
8749 |
全量+增量 |
1 |
MySQL 8.0/2U4G |
MRS 3.2.0-LTS.1 |
14 |
152 |
1.4 |
9312 |
|
增量 |
5 |
MySQL 8.0/2U4G |
MRS 3.2.0-LTS.1 |
14 |
152 |
2 |
13460 |
|
全量+增量 |
5 |
MySQL 8.0/2U4G |
MRS 3.2.0-LTS.1 |
14 |
152 |
3.6 |
24824 |
|
MySQL > Kafka |
增量 |
1 |
MySQL 8.0/2U4G |
2.3.0/2U4G |
14 |
152 |
2.8 |
19287 |
全量+增量 |
1 |
MySQL 8.0/2U4G |
2.3.0/2U4G |
14 |
152 |
2.6 |
17133 |
|
增量 |
5 |
MySQL 8.0/2U4G |
2.3.0/2U4G |
14 |
152 |
3 |
20303 |
|
全量+增量 |
5 |
MySQL 8.0/2U4G |
2.3.0/2U4G |
14 |
152 |
9 |
61750 |
|
MySQL > Doris |
增量 |
1 |
MySQL 8.0/2U4G |
1.2.3/4u16g |
14 |
152 |
1.1 |
7391 |
全量+增量 |
1 |
MySQL 8.0/2U4G |
1.2.3/4u16g |
14 |
152 |
1.1 |
7335 |
|
增量 |
5 |
MySQL 8.0/2U4G |
1.2.3/4u16g |
14 |
152 |
1.8 |
12408 |
|
全量+增量 |
5 |
MySQL 8.0/2U4G |
1.2.3/4u16g |
14 |
152 |
3.5 |
24108 |
|
Oracle > DWS |
增量 |
1 |
Oracle 11g/8U32G |
DWS 8.1.3/4U32G |
14 |
152 |
0.9 |
4065 |
全量+增量 |
1 |
Oracle 11g/8U32G |
DWS 8.1.3/4U32G |
14 |
223 |
1.2 |
5532 |
|
增量 |
5 |
Oracle 11g/8U32G |
DWS 8.1.3/4U32G |
14 |
223 |
1.3 |
6083 |
|
全量+增量 |
5 |
Oracle 11g/8U32G |
DWS 8.1.3/4U32G |
14 |
223 |
6.3 |
29928 |
|
Oracle > Hudi |
增量 |
1 |
Oracle 11g/8U32G |
MRS 3.2.0-LTS.1 |
14 |
223 |
0.9 |
4164 |
全量+增量 |
1 |
Oracle 11g/8U32G |
MRS 3.2.0-LTS.1 |
14 |
223 |
1.7 |
7861 |
|
增量 |
5 |
Oracle 11g/8U32G |
MRS 3.2.0-LTS.1 |
14 |
223 |
1 |
4734 |
|
全量+增量 |
5 |
Oracle 11g/8U32G |
MRS 3.2.0-LTS.1 |
14 |
223 |
2.7 |
12797 |
|
Oracle > Kafka |
增量 |
1 |
Oracle 11g/8U32G |
2.3.0/2U4G |
14 |
223 |
1.2 |
5696 |
全量+增量 |
1 |
Oracle 11g/8U32G |
2.3.0/2U4G |
14 |
223 |
2.8 |
13184 |
|
增量 |
5 |
Oracle 11g/8U32G |
2.3.0/2U4G |
14 |
223 |
1.2 |
5552 |
|
全量+增量 |
5 |
Oracle 11g/8U32G |
2.3.0/2U4G |
14 |
223 |
7.8 |
37123 |
|
PostgreSQL > DWS |
增量 |
1 |
PostgreSQL 16.8/2U4G |
DWS 8.1.3/4U32G |
16 |
175 |
1.1 |
5256 |
全量+增量 |
1 |
PostgreSQL 16.8/2U4G |
DWS 8.1.3/4U32G |
16 |
175 |
1 |
4365 |
|
增量 |
5 |
PostgreSQL 16.8/2U4G |
DWS 8.1.3/4U32G |
16 |
175 |
1.4 |
6567 |
|
全量+增量 |
5 |
PostgreSQL 16.8/2U4G |
DWS 8.1.3/4U32G |
16 |
175 |
2.4 |
11142 |
|
PostgreSQL > Hudi |
增量 |
1 |
PostgreSQL 16.8/2U4G |
MRS 3.2.0-LTS.1 |
16 |
175 |
1.3 |
5958 |
全量+增量 |
1 |
PostgreSQL 16.8/2U4G |
MRS 3.2.0-LTS.1 |
16 |
175 |
1.2 |
5554 |
|
增量 |
5 |
PostgreSQL 16.8/2U4G |
MRS 3.2.0-LTS.1 |
16 |
175 |
1.7 |
7700 |
|
全量+增量 |
5 |
PostgreSQL 16.8/2U4G |
MRS 3.2.0-LTS.1 |
16 |
175 |
1.9 |
8584 |
|
Kafka > Hudi |
增量 |
1 |
2.3.0/2U4G |
MRS 3.2.0-LTS.1 |
40 |
1069 |
4.3 |
4154 |
增量 |
5 |
2.3.0/2U4G |
MRS 3.2.0-LTS.1 |
40 |
1069 |
9.1 |
9291 |