数据治理平台 数据平台总体架构 本项目一期以离线数据分析为主，按照华为云数据使能方案的离线数据湖子方案，以华为公有云为载体，为客户建设离线数据湖平台，作为本次项目数据分析应用的数据底座。 离线数据湖平台整体架构如下，核心由三个云服务组成，大数据平台 MRS 、数据仓库平台DWS、数据集成治理平台DataArts

查看更多 →

订阅平台业务数据 典型场景 第三方应用可在物联网平台订阅设备相关的业务数据，当物联网平台中设备的业务信息发生变化时（如设备注册、设备数据上报、设备状态变更等），平台会向第三方应用发送通知消息，通知其具体的变化信息。第三方应用可以调用此接口向物联网平台订阅不同类型的设备业务变更通知。

查看更多 →

对接大数据平台 支持的大数据平台简介 华为云MRS对接OBS Cloudera CDH对接OBS Hortonworks HDP对接OBS 父主题： 大数据场景下使用OBS实现存算分离

查看更多 →

。 训练NLP大模型 压缩NLP大模型 通过模型压缩可以降低推理显存占用，节省推理资源提高推理性能。 压缩NLP大模型 部署NLP大模型 部署后的模型可进行调用操作。 部署NLP大模型 调用NLP大模型 支持“能力调测”功能与API两种方式调用大模型。 调用NLP大模型 盘古NLP大模型应用开发

查看更多 →

确认数据迁移结果 确认升级迁移结果有两种方式： 方式一：（自动）在DRS管理控制台查看迁移结果。DRS会针对迁移对象、用户、数据等维度进行对比，从而给出迁移结果。 方式二：（手工）在 GaussDB (for MySQL)管理控制台查看迁移结果。直接登录数据库查看库、表、数据是否迁移完成。手工确认数据迁移情况。

查看更多 →

缓存实例备份文件如何存放？备份文件的数量是否有限制？ Redis在线数据迁移是迁移整个实例数据么？ AOF文件在什么情况下会被重写 Redis迁移失败有哪些常见原因？ 一个数据迁移能迁移到多个目标实例么？ 怎么放通SYNC和PSYNC命令？ 迁移或导入备份数据时，相同的Key会被覆盖吗？ Cluster

查看更多 →

5及其以前的版本，新版本集群应为MRS1.7及其以后的版本。 迁移数据前用户应该有旧的索引数据。 安全集群需配置跨集群互信和启用集群间拷贝功能，普通集群仅需启用集群间拷贝功能。详情请参见配置跨集群互信。 操作步骤 把旧集群中的用户数据迁移至新集群中。迁移数据需单表手动同步新旧集群的数据，通过Export、distcp、Import来完成。

查看更多 →

迁移开发数据 数据导出 数据导入 通过配置数据导入模板，进行数据导入 父主题： 系统管理

查看更多 →

maxcompute.aliyun-inc.com” 迁移选项 大表规则 设置大表条件，当符合大表的条件时，将自动按分区拆分迁移子任务。建议保持默认，也可根据实际需求修改。 小表规则 设置小表条件，当符合小表的条件时，自动将多个小表合并到一个迁移子任务中，提高迁移效率。建议保持默认，也可根据实际需求修改。

查看更多 →

String 迁移任务ID。 task_name String 迁移任务名称。 description String 迁移任务描述。 status String 迁移任务状态，这个字段的值包括：SUCCESS（成功）, FAILED（失败）, MIGRATING（迁移中），TERM

查看更多 →

观察消费者是否能正常从新Kafka实例中获取数据。 修改生产客户端，Kafka连接地址改为新Kafka实例的连接地址。 重启生产客户端，将生产业务迁移到新Kafka实例中。 生产业务迁移后，观察连接新Kafka实例的消费业务是否正常。 迁移结束。 常见问题：如何将持久化数据也一起迁移 如果需要将原Kaf

查看更多 →

才可以进行数据迁移。 单节点不支持数据迁移。 数据迁移新建任务 登录 表格存储 服务管理控制台。 单击管理控制台左上角的，选择区域。 单击集群管理，选择集群进入集群详情页面。 单击数据迁移进入数据迁移管理页面。 表1 数据迁移参数说明 参数 说明 任务ID/名称 新建迁移任务ID/名称。

查看更多 →

跨账号迁移业务数据（只迁移数据盘） 操作场景 用户的业务数据一般保存在数据盘中，要想实现业务数据跨账号迁移，需要用到镜像服务的创建数据盘镜像、共享镜像等功能。本节操作以Linux操作系统为例，为您详细介绍在同一区域内，跨账号迁移业务数据（只迁移数据盘数据）的操作流程。 方案介绍

查看更多 →

CDM 有两种迁移方式，支持的数据源有所不同： 表/文件迁移：适用于数据入湖和数据上云场景下，表或文件级别的数据迁移，请参见表/文件迁移支持的数据源类型。 整库迁移：适用于数据入湖和数据上云场景下，离线或自建数据库整体迁移场景，请参见整库迁移支持的数据源类型。 支持的数据源 新建连接

查看更多 →

确认数据迁移结果 确认升级迁移结果有两种方式： 方式一：（自动）在DRS管理控制台查看迁移结果。DRS会针对迁移对象、用户、数据等维度进行对比，从而给出迁移结果。 方式二：（手工）在RDS管理控制台查看迁移结果。直接登录数据库查看库、表、数据是否迁移完成。手工确认数据迁移情况。 在DRS管理控制台查看迁移结果

查看更多 →

数据迁移方案介绍 准备工作 元数据导出 数据复制 数据恢复 父主题： 数据迁移

查看更多 →

数据迁移进阶实践 增量迁移原理介绍 时间宏变量使用解析 事务模式迁移 迁移文件时加解密 MD5校验文件一致性 字段转换器配置指导 新增字段操作指导 指定文件名迁移 正则表达式分隔半结构化文本 记录数据迁移入库时间 文件格式介绍 不支持数据类型转换规避指导

查看更多 →

云数据迁移-成长地图 | 华为云 云数据迁移 云数据迁移（Cloud Data Migration，简称CDM），是一种高效、易用的批量数据迁移服务。 CDM围绕大数据迁移上云和智能数据湖解决方案，提供了简单易用的迁移能力和多种数据源到数据湖的集成能力，降低了客户数据源迁移和集成

查看更多 →

迁移前构造数据 迁移前需要在源库构造一些数据类型，供迁移完成后验证数据。 前提条件 已知源端数据库的IP地址，端口，账户和密码。 操作步骤 根据源端数据库的IP地址，通过数据库连接工具连接数据库。 根据支持的数据类型，在源库执行语句构造数据。 登录源端数据库。 进入任意一个待迁移的逻辑库。

查看更多 →

确认数据迁移结果 确认升级迁移结果有两种方式： 方式一：（自动）在DRS管理控制台查看迁移结果。DRS会针对迁移对象、用户、数据等维度进行对比，从而给出迁移结果。 方式二：（手工）在TaurusDB管理控制台查看迁移结果。直接登录数据库查看库、表、数据是否迁移完成。手工确认数据迁移情况。

查看更多 →

归档数据迁移方案 本节介绍各云服务商存在归档数据时，如何解冻并迁移到华为云OBS。 华为云OBS 阿里云OSS 腾讯云COS 百度云BOS 七牛云Kodo 金山云KS3 优刻得US3 亚马逊云S3 微软云Blob

查看更多 →