数据迁移 进行IP交换 创建备份导入任务 查询迁移任务列表 删除数据迁移任务 查询迁移任务详情 设置迁移任务自动重连 停止数据迁移任务 查询在线迁移进度明细 创建在线数据迁移任务 配置在线数据迁移任务 批量停止数据迁移任务 同步停止数据迁移任务 查询迁移日志列表 父主题： API

查看更多 →

数据迁移 数据库与存储迁移 数据库迁移 由运维或者开发人员基于华为云数据复制服务DRS完成数据库迁移，详情请参见跨云数据库在线迁移。 存储迁移 由运维或者开发人员基于华为云对象存储迁移服务 OMS 完成对象存储中的数据迁移，详情请参见对象存储迁移服务 OMS。 目前对象存储迁移服务O

查看更多 →

数据迁移 数据迁移方案介绍 数据迁移到 MRS 前信息收集 数据迁移到MRS前网络准备 数据迁移常见端口要求 使用 CDM 服务迁移Hadoop数据至MRS集群 使用CDM服务迁移HBase数据至MRS集群 使用CDM服务迁移Hive数据至MRS集群 使用BulkLoad工具向HBase中批量导入数据

查看更多 →

数据迁移 迁移方案概览 通过数据复制服务迁移数据 通过mongoexport和mongoimport工具迁移数据 通过mongodump和mongorestore工具迁移数据 父主题： 用户指南

查看更多 →

数据迁移 迁移方案概览 通过数据复制服务迁移数据 通过mongoexport和mongoimport工具迁移数据 通过mongodump和mongorestore工具迁移数据

查看更多 →

数据迁移 迁移说明 通过云专线迁移 使用公网迁移 文件系统之间迁移数据 父主题： 其他操作

查看更多 →

自建Redis主备、集群实例如何迁移到GeminiDB Redis? 为什么阿里云Redis、腾讯云Redis等云服务不能使用DRS进行数据迁移？ 自建主备Redis，迁移到GeminiDB Redis集群，需要考虑哪些因素？ 迁移完成后数据量变少了，100GB的数据迁移到GeminiDB

查看更多 →

数据迁移 数据迁移概览 迁移Hive数据至 DLI 迁移Kafka数据至DLI 迁移Elasticsearch数据至DLI 迁移RDS数据至DLI 迁移DWS数据至DLI

查看更多 →

数据迁移 迁移方案总览 使用DRS迁移 GaussDB (for MySQL)数据 使用mysqldump迁移GaussDB(for MySQL)数据

查看更多 →

导入完成后，进行数据完整性验证，可抽样对比源端数据以及目标端数据，查看是否一致。 迁移性能参考 迁移环境： 源端：华为云4U16GB的 弹性云服务器 部署开源InfluxDB以及迁移工具。 目标端：4U16GB，3节点GeminiDB Influx实例。 迁移性能： 源端单一进程数据导出速率为1GB/min。

查看更多 →

数据迁移 Redis数据迁移方案概览 迁移后Redis数据一致性校验 阿里云数据库Redis/Tair到GeminiDB Redis的迁移 腾讯云Redis到GeminiDB Redis的迁移 自建Redis到GeminiDB Redis的迁移 RDB文件恢复到GeminiDB Redis(推荐)

查看更多 →

数据迁移 根据迁移配置，华为云OMS服务会开始从源端存储系统拉取数据。同时，服务会确保数据的完整性和一致性，避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能，当迁移过程中出现网络中断或其他异常情况时，服务可以从断点处恢复传输，确保数据的完整性和迁移的连续性。 父主题：

查看更多 →

预训练数据处理 训练前需要对数据集进行预处理，转化为.bin和.idx格式文件，以满足训练要求。 Alpaca数据处理说明 数据预处理脚本preprocess_data.py存放在代码包的“llm_train/AscendSpeed/ModelLink/tools”目录中，脚本样

查看更多 →

使用“回源配置方案”迁移增量对象数据 本节指导用户使用回源配置方案迁移增量对象数据。 优势 此方案优势在于： 业务零中断，增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高，割接前可提前验证，迁移后可校验。 操作流程 “回源配置方案”迁移增量对象数据流程图，如图1所示。

查看更多 →

预训练数据处理 训练前需要对数据集进行预处理，转化为.bin和.idx格式文件，以满足训练要求。 这里以Llama2-70B为例，对于Llama2-7B和Llama2-13B，操作过程与Llama2-70B相同，只需修改对应参数即可。 Alpaca数据处理说明 数据预处理脚本preprocess_data

查看更多 →

预训练数据处理 训练前需要对数据集进行预处理，转化为.bin和.idx格式文件，以满足训练要求。 这里以Qwen-14B为例，对于Qwen-7B和Qwen-72B，操作过程与Qwen-14B相同，只需修改对应参数即可。 Alpaca数据处理说明 数据预处理脚本preprocess_data

查看更多 →

预训练数据处理 训练前需要对数据集进行预处理，转化为.bin和.idx格式文件，以满足训练要求。 Alpaca数据处理说明 数据预处理脚本preprocess_data.py存放在代码包的“llm_train/AscendSpeed/ModelLink/tools/”目录中，脚本具体内容如下。

查看更多 →

镜像仓库迁移到 容器镜像服务 ，节省运维成本。 如何把已有的镜像仓库平滑地迁移到容器 镜像服务 ？这里将介绍3种常见的方案，您可以根据自己的实际使用场景来选择。 迁移方案 表1 迁移方案及适用场景对比 方案类型 适用场景 注意事项 使用docker命令将镜像迁移至SWR 待迁移的镜像数量较少

查看更多 →

使用“源端/目的端双写方案”方案迁移增量对象数据 操作场景 本章节指导用户使用“源端/目的端双写方案”方案迁移增量对象数据。此方案优势在于可以确保业务零中断。 主要迁移步骤如下所示： 用户在全量迁移前，需配置业务同时向源端和目的端写数据，保证增量数据在两端都存在。 使用OMS完成源端数据的全量迁

查看更多 →

在源库选择需要同步的数据库和表。本次实践中选择“test”中所有的表。 选择完成后，可以设置同步后是否重新命名库名和表名。 单击“下一步”。 高级设置：全量设置中“同步对象类型”仅勾选“同步数据”。 数据加工（可选，根据实际需求设置）。 预检所有配置完成后，进行预检查，确保迁移成功。对于未

查看更多 →

数据迁移同步 数据导入导出 ClickHouse访问RDS MySQL服务 父主题： ClickHouse应用开发指导

查看更多 →