ROMA FDI Job 功能 通过ROMA FDI Job节点执行一个预先定义的ROMA Connect数据集成任务，实现源端到目标端的数据集成转换。 原理 该节点方便用户启动或者查询FDI任务是否正在运行。 参数 ROMA FDI Job的参数配置，请参考以下内容： 表1 属性参数

查看更多 →

数据源 500 暂不支持 数据集成 FDI 数据集成任务数 1000 暂不支持 服务集成 APIC API 入门版：100 基础版：250 专业版：800 企业版：2000 铂金版：8000 支持 API分组 1500 支持 单个API分组内的API 入门版：100 基础版：250 专业版：800

查看更多 →

数据集成普通任务 FDI各类数据库支持哪些数据类型？ 跟踪号是什么，能跟踪到数据吗？ FDI任务是否支持清空目标表？ FDI任务只能采集单张表到单张表吗？ 用户创建的FDI任务，同一账号的其他用户可见吗？ FDI通过公网对接其他租户的 MRS HIVE如何配置？ 从OBS解析文件到

查看更多 →

的情况下，同步任务将执行对源端数据向目标端数据的全量同步。在组件上可以看到同步的数据量及运行时长等信息。 图5 全量同步 数据补录 当发生源端历史数据变更等情况时，通过在读取组件自定义 SQL，可以添加针对日期字段进行过滤的 WHERE 条件，可以实现针对特定时间段的数据补录需要。 图6 数据补录 增量同步

查看更多 →

数据集成 CDM 与其他数据迁移服务有什么区别，如何选择？ CDM有哪些优势？ CDM有哪些安全防护？ 如何降低CDM使用成本？ CDM未使用数据传输功能时，是否会计费？ 已购买包年包月的CDM套餐包，为什么还会产生按需计费的费用？ 如何查看套餐包的剩余时长？ CDM可以跨账户使用吗？

查看更多 →

数据集成 数据集成主要包含三块：离线集成，实时集成，集成任务。 图1 数据集成 离线集成 主要为结构化集成和非结构化集成两种，结构化集成主要是离线集成部署方式，非结构化集成为API部署方式。 结构化集成 图2 结构化集成 集成作业 图3 集成作业 任务名称：自定义数据 需求类型：目前只支持新增

查看更多 →

数据集成 支持接入的日志 接入数据 父主题： 设置

查看更多 →

数据集成 数据集成概述 数据集成工具介绍 数据集成入湖范围 数据集成前探查 全量数据同步 增量数据同步 父主题： 实施步骤

查看更多 →

数据集成 数据集成普通任务 数据集成组合任务

查看更多 →

FDI各类数据库支持哪些数据类型？ FDI各类数据库支持的数据类型有： Kafka数据库：string MySQL数据库：integer，bigint，number，varchar，char，float，date，timestamp，datetime Oracle数据库：inte

查看更多 →

Connect主要包含四个组件：数据集成（FDI）、服务集成（APIC）、消息集成（MQS）、设备集成（LINK）。 FDI 快速数据集成FDI（Fast Data Integration，简称FDI）是ROMA Connect的数据集成组件。FDI支持多种数据源（文本、消息、API、关系型数据和非关系

查看更多 →

数据集成权限 表1 数据集成权限 权限 对应API接口 授权项（Action） 依赖的授权项 IAM项目 (Project) 企业项目 (Enterprise Project) 创建任务 POST /v2/{project_id}/fdi/instances/{instance_id}/tasks

查看更多 →

数据集成API错误码 更多服务错误码请参见API错误中心。 状态码 错误码 错误信息 描述 处理措施 400 FDI.3002 Invalid parameters. 存在非法参数。 参考API文档修改非法参数。 400 FDI.3016 Failed to test the connectivity

查看更多 →

用户创建的FDI任务，同一账号的其他用户可见吗？ FDI任务是做的用户隔离，如果没有授权，同一账号的其他用户看不到，用户要看到其他用户的任务需要通过集成应用授权。 父主题： 数据集成普通任务

查看更多 →

FDI任务是否支持清空目标表？ FDI创建任务时目标端选择DWS、MySQL、Oracle、PostgreSQL/openGauss、SQL Server、 GaussDB (for MySQL)数据源支持清空目标表，其他数据源不支持清空表操作。 父主题： 数据集成普通任务

查看更多 →

导入导出数据集成任务 概述 数据集成任务创建后，您可以通过导入导出功能，导入或导出数据集成任务。 导出数据集成任务 登录ROMA Connect控制台，在“实例”页面单击实例上的“查看控制台”，进入实例控制台。 在左侧的导航栏选择“数据集成 FDI > 任务管理”。 在任务管理页

查看更多 →

项目ID。 源端数据源ID 源端数据源ID。 目标端数据源ID 目标端数据源ID。 源端数据源的名称 源端数据源的名称。 目标端数据源的名称 目标端数据源的名称。 源端数据源所属集成应用ID 源端数据源所属集成应用ID。 目标端数据源所属集成应用ID 目标端数据源所属集成应用ID。 源端数据源所属集成应用名称

查看更多 →

数据集成API 集群管理 作业管理 连接管理 附：公共数据结构

查看更多 →

数据集成API 数据源管理 任务监控管理 任务管理

查看更多 →

timeout”错误 Kafka到Mysql的实时任务时，MQS中的Topic下有数据，但是FDI任务没有采集到数据。 Mysql到Mysql的定时任务，源端有类型为tinyint(1)，值为2的字段，但是采集到目标端值就变成了1 目标端数据源为公网Kafka时，定时任务目标端报“The task

查看更多 →

数据集成概述 数据集成是指将政府部门IT系统中的业务源数据按需通过全量或者增量的方式接入数管平台中，并确保数据的一致性、有效性及适用性。源数据种类可包括结构化数据、非结构化数据。在本次数据治理实施项目中，使用到的数据集成工具为CDM云数据迁移工具。 该过程需要注意的是保障政务数据

查看更多 →