数据集成（ CDM 作业） 数据集成概述 约束与限制 支持的数据源 创建并管理CDM集群 在CDM集群中创建连接 在CDM集群中创建作业 时间宏变量使用解析 优化迁移性能 关键操作指导 使用教程 常见错误码参考

查看更多 →

数据集成（实时作业） 实时作业概述 支持的数据源 使用前自检概览 网络打通 新建实时集成作业 配置实时集成作业 实时集成任务运维 字段类型映射关系 任务性能调优 使用教程

查看更多 →

数据集成API概览 表1 数据集成API类型 类型 说明 集群管理 集群管理类型接口。 作业管理 作业管理类型接口。 连接管理 连接管理类型接口。 集群管理 表2 集群管理 API 说明 流控策略 查询集群详情 查询集群详情接口。 cdm_common 删除集群 删除集群接口。 cdm_b

查看更多 →

数据集成任务管理 查看数据集成任务 导入导出数据集成任务 附录：QuartZ Cron表达式配置说明 父主题： 数据集成指导

查看更多 →

数据集成（实时作业） 问题案例总览 数据源和资源组网络不通如何排查？ 数据源安全组放通哪些端口可满足Migration访问？ 如何配置Hudi Compaction的Spark周期任务？ MySQL到DWS实时同步中，同步新增列的DDL时报错怎么办？ MySQL到DWS实时同步中

查看更多 →

数据集成（离线作业） 离线作业概述 支持的数据源 新建离线处理集成作业 配置离线处理集成作业 配置作业源端参数 配置作业目的端参数 字段转换器配置指导 新增字段操作指导

查看更多 →

概述 数据集成围绕 GaussDB (DWS)，提供了简单易用的迁移能力及多种数据源到DWS的集成能力，降低用户数据源迁移和集成的复杂性，是一种高效易用的数据集成服务。目前数据源支持从Kafka、MySQL、Oracle和IoT源端迁移至GaussDB(DWS)目的端。 该特性仅8.2

查看更多 →

数据集成普通任务 FDI各类数据库支持哪些数据类型？ 跟踪号是什么，能跟踪到数据吗？ FDI任务是否支持清空目标表？ FDI任务只能采集单张表到单张表吗？ 用户创建的FDI任务，同一账号的其他用户可见吗？ FDI通过公网对接其他租户的 MRS HIVE如何配置？ 从OBS解析文件到

查看更多 →

包含任务的调度日志和操作日志信息。支持保留最近10000条记录。 调度日志：指任务执行的信息记录，包括计划调度时间、取数时间、数据量、各阶段耗时、数据源读取耗时、系统处理耗时和统计周期等。 操作日志：指任务的管理操作记录，包括创建、更新、删除、启动、停止等操作。 查看调度信息 登录ROMA

查看更多 →

数据仓库 上云与实施服务 产品介绍 常见问题 计费说明 父主题： 上云与实施

查看更多 →

图解数据仓库服务

查看更多 →

获取数据仓库列表信息 功能介绍 获取数据仓库列表 URI GET /v1.0/{project_id}/common/warehouses 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id，获取方法请参见获取项目ID 表2 Query参数

查看更多 →

请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 Content-Type 是 String 内容类型。填application/json X-Auth-Token 是 String 用户Token，通过调用IAM服务获取用户Token接口获取（响应消息头中X-Subject-Token的值）

查看更多 →

集成 简介 集成PC端应用到ISDP+系统 集成大屏应用到ISDP+系统 集成移动端应用到ISDP+ Mobile系统 接入端侧设备到ISDP+系统 父主题： 用户指南

查看更多 →

什么是数据探索？ 数据探索（Data Explorer），是一个聚焦用户数据集（有权限访问的数据），用统一的sql语法，为用户跨数据源探索价值数据的服务。 父主题： 数据探索

查看更多 →

什么是数据加载？ 数据加载提供简便、高效的数据加载能力，帮助用户完成多种数据源之间的数据迁移工作。 父主题： 数据加载

查看更多 →

数据仓库服务GaussDB(DWS)接入LTS 支持数据仓库GaussDB（DWS）日志接入LTS。 具体接入方法请参见集群日志管理。 父主题： 使用云服务接入LTS

查看更多 →

仅当“是否SSL”选择“是”时需要配置。 填写步骤一：准备数据源中记录的Topic所属集成应用的Key。 SSL密码/应用Secret 仅当“是否SSL”选择“是”时需要配置。 填写步骤一：准备数据源中记录的Topic所属集成应用的Secret。 完成MQS数据源参数配置后，单击“开始检测”，进行数据源的连接测试

查看更多 →

端。 本实践中需要对源端数据进行数据结构转换后，再写入目标端数据库，此处选择“是”。 数据根字段 指从源端获取到的JSON或XML格式数据中，元数据集上层公共字段的路径。此处不设置。 数据类型 选择从Kafka数据源获取的数据格式类型，需要与Kafka实际存储的数据格式一致。 消费偏移设置

查看更多 →

数据集成组合任务 源数据库重启等操作对组合任务是否有影响？ 如何修复意外重启等原因导致的XStream模式Oracle CDC功能异常？ 父主题： 数据集成

查看更多 →

数据服务实施：基于数据服务设计方案，将技术指标封装成数据API，供应用侧消费。 数据应用集成设计与实施 数据应用集成设计是指以数据可视、分析决策为主要目的的应用系统，同时也可与生产系统联动形成业务实时协同，主要包含以下几方面内容： 应用场景设计：基于业务需求设计面向最终业务人员的应用场景，输出故事线、页面原型等。 应

查看更多 →