我的导入 管理员可以使用模板批量配置自建应用的角色，导入模板文件的任务执行状态可以在“我的导入”页面查看。支持查看任务详情或者下载原始导入文件。 查看导入任务 登录管理中心。 选择左侧导航栏的“任务中心 > 我的导入”。 在导入任务列表中，查看导入任务状态及结果。 （可选）可以设

查看更多 →

在迁移过程中，数据读写过程都是由一个单一任务完成的，受限于资源，整体性能较低，对于海量数据场景通常不能满足要求。 CDM 任务基于分布式计算框架，自动将任务切分为独立的子任务并行执行，能够极大提高数据迁移的效率。针对Hive、HBase、MySQL、DWS（ 数据仓库 服务）数据源，使用高效的数据导入接口导入数据。 多种数据源支持

查看更多 →

单个map的错误记录超过设置的最大错误记录数则任务自动结束，已经导入的数据不支持回退。推荐使用临时表作为导入的目标表，待导入成功后再改名或合并到最终数据表。 0 开启限速 设置限速可以保护源端读取压力，速率代表CDM传输速率，而非网卡流量。 说明： 支持对非二进制文件迁移的作业进行单并发限速。

查看更多 →

限管理实现数据的隔离和互访，了解用户、角色的关系，了解grant的基本用法，了解基于角色的权限管理(RBAC)。 1.5h 使用数据脱敏实现卡号等隐私信息屏蔽 本实验通过创建数据仓库服务 GaussDB (DWS)并使用DWS的数据脱敏功能，针对不同用户设置部分数据列的屏蔽，实现敏感数据脱敏，确保数据安全。

查看更多 →

据再写入目的端，相对这样传统的做法，CDM的优势如表1所示。 表1 CDM优势 优势项 用户自行开发 CDM 易使用 自行准备 服务器 资源，安装配置必要的软件并进行配置，等待时间长。 程序在读写两端会根据数据源类型，使用不同的访问接口。一般是数据源提供的对外接口，例如JDBC、原生

查看更多 →

在迁移过程中，数据读写过程都是由一个单一任务完成的，受限于资源，整体性能较低，对于海量数据场景通常不能满足要求。 CDM任务基于分布式计算框架，自动将任务切分为独立的子任务并行执行，能够极大提高数据迁移的效率。针对Hive、HBase、MySQL、DWS（数据仓库服务）数据源，使用高效的数据导入接口导入数据。 多种数据源支持

查看更多 →

支持的数据源 实时集成作业支持的数据源如表1所示。 表1 实时集成作业支持的数据源 数据源分类 源端数据源 对应的目的端数据源 相关文档 关系型数据 MySQL Hadoop： MRS Hudi MySQL同步到MRS Hudi 消息系统：DMS Kafka MySQL同步到DMS

查看更多 →

布，但是元数据和索引存储在本地，仍然需要进行重分布。存算分离表在重分布时，表只支持读，元数据的重分布时间一般比较短，但是，如果表上创建了索引，索引会影响重分布的性能，重分布完成时间与索引的数据量成正比关系，在此期间，表只支持读。 存算一体（单机部署）不支持分布式模式，因此不支持扩缩容、逻辑集群、资源管理等操作。

查看更多 →

数据仓库规格 GaussDB(DWS)的规格按照产品类型分为存算一体和存算分离。其中存算一体还包含单机版模式。各产品类型的不同差异，详情请参见数据仓库类型。 低配置集群，如内存16G、vCPU4核及以下的规格，建议不要用于生产环境，可能会导致资源过载风险。 存算一体规格 存算一体

查看更多 →

支持的数据源 支持的数据源（2.10.0.300） 支持的数据源（2.9.3.300） 支持的数据源（2.9.2.200） 支持的数据类型

查看更多 →

步场景，支持的数据源请参见分库分表同步支持的数据源类型。 整库迁移：适用于数据入湖和数据上云场景下，离线或自建数据库整体同步场景，支持的数据源请参见整库同步支持的数据源类型。 因各版本集群支持的数据源有所差异，其他版本支持的数据源仅做参考。 不同CDM集群支持的数据源程度不一样，以实际为准。

查看更多 →

了简单易用的迁移能力及多种数据源到DWS的集成能力，降低用户数据源迁移和集成的复杂性，是一种高效易用的数据集成服务。目前数据源支持从Kafka、MySQL、Oracle和IoT源端迁移至GaussDB(DWS)目的端。 该特性仅8.2.0及以上集群版本支持。 源端数据源不支持DWS，即不支持从DWS迁移到DWS。

查看更多 →

选择kafka服务的对接地址。 主题 填写接收推送消息的kafka topic。 SASL认证 若开启SASL认证，请填写您在购买Kafka实例中所选安全协议、SASL认证机制以及所填的SASL用户名和密码。 Kafka安全协议 选择您在购买Kafka实例中所启用的kafka安全协议。

查看更多 →

支持的数据源 支持的数据源（2.10.0.300） 支持的数据源（2.9.3.300） 支持的数据源（2.9.2.200） 支持的数据类型

查看更多 →

支持的数据源 支持的数据源（2.9.3.300） 支持的数据源（2.9.2.200） 支持的数据类型 父主题： 数据集成（CDM作业）

查看更多 →

中选择“我的工作空间 > 导入任务”，进入我的导入任务页面。 页面默认展示当前租户下数据实体、关系实体以及枚举类型的导入任务。如有需要，您还可： 筛选导入任务：在“条件筛选”处输入或选择常用查询条件，单击“搜索”，结果列表显示满足条件筛选的数据。 下载错误报告：在列表中单击状态为

查看更多 →

我的导入任务 操作场景 工业数字模型驱动引擎-数据建模引擎（xDM Foundation，简称xDM-F）提供异步导入的功能。当用户导入对象后，可在“我的导入任务”查看具体的导入信息。 前提条件 已登录应用运行态。 操作步骤 在左侧导航栏中，选择“我的工作空间 > 我的导入任务”，进入我的导入任务页面。

查看更多 →

已登录应用设计态。 操作步骤 在左侧导航栏中，选择“我的工作空间 > 我的导入任务”，进入我的导入任务页面。 在“条件筛选”中，选择导入类型、导入状态、创建时间，或者输入文件名称，单击“搜索”，即可列表中查看导入信息。 图1 我的导入任务 导入类型：可选择数据实体和关系实体。 导入状态：可选择导出成功、导出失败和正在导出。

查看更多 →

查询导入的PVC 功能介绍 查询指定命名空间下的PVC。 URI GET /api/v1/namespaces/{namespace}/extended-persistentvolumeclaims 表1 Path参数 参数 是否必选 参数类型 描述 namespace Yes String

查看更多 →

在实际业务中，您可能需要给不同角色的用户授予不同的资源操作权限。IAM服务为用户提供了细粒度访问控制功能。在IAM中，管理员用户（即属于admin用户组的用户）通过创建自定义策略，可以自由搭配需要授予的权限集。通过给用户组授予策略，用户组中的用户就能获得策略中定义的权限。IAM通过策略定义的权限内容实现精细的权限管理。

查看更多 →

在MapReduce作业的提交阶段，将数据从临时表迁移到正式表中。 数据导出到文件系统 在MapReduce作业的Map阶段，从HDFS或者HBase中抽取数据，然后将数据写入到文件服务器临时目录中。 在MapReduce作业的提交阶段，将文件从临时目录迁移到正式目录。 Loader的架构和详细

查看更多 →