中软国际数据治理专业服务解决方案实践

创建HDFS多线程任务 功能简介 建立多线程任务，同时启动多个实例执行文件操作。 代码样例 如下是删除文件的代码片段，详细代码请参考com.huawei.bigdata.hdfs.examples中的HdfsExample类。 // 业务示例2：多线程 final int THREAD_COUNT

查看更多 →

通过在业务端的应用系统上增加一条记录，例如，在OA系统上增加一个用户，然后在灾备端的应用系统查看该用户是否存在，用来判断数据是否已同步。正常状态下，用户应该存在。

查看更多 →

同步数据集 功能介绍 从数据集输入位置同步数据至数据集，包含样本及标注信息。文本类数据集不支持此操作。 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI POST /v

查看更多 →

incremental：增量同步 full：全量同步 other：其他 percentage String 进度百分比。 catchup_stage String 追赶阶段。 取值范围： wait：等待同步 failed：同步失败 incremental：增量同步 full：全量同步 other：其他

查看更多 →

暂停StarRocks数据同步 功能介绍 暂停StarRocks数据同步。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/instances/{instance_id}/starrocks/databases/replication/pause

查看更多 →

修改数据同步 功能介绍 修改数据同步。 调用方法 请参见如何调用API。 URI PUT /v3/{project_id}/instances/{instance_id}/clickhouse/databases/replication/config 表1 路径参数 参数 是否必选

查看更多 →

创建StarRocks数据同步 功能介绍 创建StarRocks数据同步。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/instances/{instance_id}/starrocks/databases/replication 表1 路径参数

查看更多 →

incremental：增量同步 full：全量同步 other：其他 percentage String 进度百分比。 catchup_stage String 追赶阶段。 取值范围： wait：等待同步 failed：同步失败 incremental：增量同步 full：全量同步 other：其他

查看更多 →

删除数据同步 功能介绍 删除数据同步。 调用方法 请参见如何调用API。 URI DELETE /v3/{project_id}/instances/{instance_id}/clickhouse/replication/{database_name} 表1 路径参数 参数 是否必选

查看更多 →

删除StarRocks数据同步 功能介绍 删除StarRocks数据同步。 调用方法 请参见如何调用API。 URI DELETE /v3/{project_id}/instances/{instance_id}/starrocks/databases/replication 表1

查看更多 →

暂停StarRocks数据同步 功能介绍 暂停StarRocks数据同步。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/instances/{instance_id}/starrocks/databases/replication/pause

查看更多 →

点属性列表，如果列表为空，则不会同步点属性。参数详见vertex、edge参数说明。 首次执行数据同步时，该参数生效，后续执行数据同步，该参数默认跟首次指定的保持一致。 edge 否 Json 边属性列表，如果列表为空，则不会同步边属性。参数详见vertex、edge参数说明。 首次执行数据同步时，该参

查看更多 →

全量数据同步 针对数据增长缓慢、非核心业务相关、无时间戳、无增删改标识、数据量低于十万条的明细表数据，以及码表、维度表等数据，采用全量同步的方式接入数管平台，并存放在贴源层的全量表内。数据初始化全量同步是指第一次从业务源库中采用全量同步的方式获取一次数据。 确定数据源 通过调研获

查看更多 →

恢复StarRocks数据同步 功能介绍 恢复StarRocks数据同步。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/instances/{instance_id}/starrocks/databases/replication/resume

查看更多 →

删除数据同步 功能介绍 删除数据同步。 调用方法 请参见如何调用API。 URI DELETE /v3/{project_id}/instances/{instance_id}/clickhouse/replication/{database_name} 表1 路径参数 参数 是否必选

查看更多 →

查看数据同步配置 功能介绍 查看数据同步配置。 调用方法 请参见如何调用API。 URI GET /v3/{project_id}/instances/{instance_id}/clickhouse/replication/config 表1 路径参数 参数 是否必选 参数类型

查看更多 →

恢复StarRocks数据同步 功能介绍 恢复StarRocks数据同步。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/instances/{instance_id}/starrocks/databases/replication/resume

查看更多 →

同步数据库和缓存数据 概述 当模型采集中采集任务执行失败时，采集日志显示数据库和缓存不一致时，可以从数据源和任务的维度，执行同步任务，使数据库和缓存保持一致，解决采集任务异常。 前提条件 已完成采集技术模型和录入业务模型。 操作步骤 登录ROMA Connect，在“实例”页面单

查看更多 →

功”，数据转存开启。 数据同步示例 数据同步开启后，可在 对象存储服务 （OBS）查看同步的告警数据。 MTD数据同步开启后，OBS会产生一定的存储费用，默认计费模式为按需计费，计费详情请参见计费说明，无存储空间限制。 如果您是购买的包年包月的固定存储空间，您可以对更历史的数据进行清

查看更多 →

多云存储数据同步方案 应用双写 如果数据是在应用服务侧产生，或者数据在客户端产生但通过服务端将数据写入对象存储，则建议使用双写方案，架构如下： 此时业务应用可对接两家对象存储的SDK，将文件以同步模式或者异步模式写入两家对象存储。对象存储的上行流量免费，所以该架构不会增加任何成本。

查看更多 →

同步停止数据迁移任务 功能介绍 同步停止数据迁移任务。 调用方法 请参见如何调用API。 URI POST /v2/{project_id}/migration-task/{task_id}/sync-stop 表1 路径参数 参数 是否必选 参数类型 描述 project_id

查看更多 →