中软国际数据治理专业服务解决方案实践

同步停止数据迁移任务 功能介绍 同步停止数据迁移任务。 调用方法 请参见如何调用API。 URI POST /v2/{project_id}/migration-task/{task_id}/sync-stop 表1 路径参数 参数 是否必选 参数类型 描述 project_id

查看更多 →

修改数据同步方式 操作场景 云数据库RDS服务支持切换主备实例的数据同步方式，以满足不同业务需求。可选择 “异步”或者“半同步”两种方式。 异步： 应用更新数据时，主库执行完操作后立即向应用返回响应，通常具有较高的性能。 半同步（默认选择）： 应用更新数据时，主库需要等待备库收到日志才向应用返回响应，对性能有影响。

查看更多 →

多云存储数据同步方案 应用双写 如果数据是在应用服务侧产生，或者数据在客户端产生但通过服务端将数据写入对象存储，则建议使用双写方案，架构如下： 此时业务应用可对接两家对象存储的SDK，将文件以同步模式或者异步模式写入两家对象存储。对象存储的上行流量免费，所以该架构不会增加任何成本。

查看更多 →

检查环境当前进程数是否过多，当可用的进程数比例低于5%，认为进程数不足。edgectl check pid无检查节点进程数：示例执行结果：

查看更多 →

进程监控 应用监控 组件监控 应用发现 父主题： 基础设施监控

查看更多 →

清理多版本数据 功能描述 多版本数据保留周期是在表每次执行insert overwrite或者truncate语句时触发，所以当表的多版本数据在保留周期时间外但是后续该表不会再执行insert overwrite或者truncate语句时，多版本保留周期外的数据不会自动清理。可以

查看更多 →

多机多卡数据并行-DistributedDataParallel(DDP) 本章节介绍基于PyTorch引擎的多机多卡数据并行训练。 训练流程简述 相比于DP，DDP能够启动多进程进行运算，从而大幅度提升计算资源的利用率。可以基于torch.distributed实现真正的分布式

查看更多 →

清理多版本数据 功能描述 多版本数据保留周期是在表每次执行insert overwrite或者truncate语句时触发，所以当表的多版本数据在保留周期时间外但是后续该表不会再执行insert overwrite或者truncate语句时，多版本保留周期外的数据不会自动清理。可以

查看更多 →

命名空间 在单集群中，不同命名空间中的数据彼此隔离。使应用可以共享同个集群的服务，也能够互不干扰。若您不设置命名空间，系统会默认使用default命名空间。 描述 工作负载描述信息。 时区同步 容器将和节点使用相同时区。时区同步功能开启后，在“数据存储 > 本地磁盘”中，将会自动添加

查看更多 →

着Pod生命周期结束而变化，详情请参见设置环境变量。 数据存储：配置容器存储，可以使用本地存储和存储卷声明（PVC）。建议使用PVC将工作负载Pod数据存储在云存储上。若存储在本地磁盘上，节点异常无法恢复时，本地磁盘中的数据也将无法恢复。容器存储相关内容请参见容器存储。 安全设置

查看更多 →

后端写进程 介绍后端写（background writer）进程的参数配置。后端写进程的功能就是把共享缓冲区中的脏数据（指共享缓冲区中新增或者修改的内容）写入到磁盘。目的是让数据库进程在进行用户查询时可以很少或者几乎不等待写动作的发生（写动作由后端写进程完成）。 此机制同样也减少

查看更多 →

后端写进程 介绍后端写（background writer）进程的参数配置。后端写进程的功能就是把共享缓冲区中的脏数据（指共享缓冲区中新增或者修改的内容）写入到磁盘。目的是让数据库进程在进行用户查询时可以很少或者几乎不等待写动作的发生（写动作由后端写进程完成）。 此机制同样也减少

查看更多 →

后端写进程 介绍后端写（background writer）进程的参数配置。后端写进程的功能就是把共享缓冲区中的脏数据（指共享缓冲区中新增或者修改的内容）写入到磁盘。目的是让数据库进程在进行用户查询时可以很少或者几乎不等待写动作的发生（写动作由后端写进程完成）。 此机制同样也减少

查看更多 →

多对多 什么是多对多 多对多关系中，首要方和次要方都不会发生任何的变化。唯一的变化是在多对多连线上，会默认添加两个字段用来分别指向关系的两侧。也就是说，一对多和聚合关系是通过在次要方添加主键和外键来表示的，而多对多关系是通过单独创建的关系表来表示的。 和一对多关系一样，删除多对多

查看更多 →

周期性自动同步 NetEco每5天向设备发起1次数据同步。 同步时间固定，可一定程度上保障数据同步，但同步周期较长。 触发性自动同步 当设备配置数据发生变更，或者设备添加或移除部件时，会向NetEco发出同步通知，NetEco在收到通知后立即发起数据同步。 由于网络原因，NetEco可

查看更多 →

Topic与表的映射关系。 用于指定某个表的数据发送到指定的Topic中，开启多分区功能后需要配置Topic的分区数，分区数必须大于1。 MRS 3.3.0及之后版本，数据过滤时间用于过滤数据，当源端数据的时间小于设定时间时，该数据将会被丢弃，当源端数据的时间大于设定时间时，该数据发送到下游。 单击显示该参数。如果“Connect

查看更多 →

同步Kafka数据至ClickHouse 您可以通过创建Kafka引擎表将Kafka数据自动同步至ClickHouse集群，具体操作详见本章节描述。 前提条件 已创建Kafka集群。已安装Kafka客户端，详细可以参考安装客户端。 已创建ClickHouse集群，并且ClickH

查看更多 →

HTAP数据同步库配置校验 功能介绍 HTAP数据同步库配置校验。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/instances/{instance_id}/starrocks/databases/replication/database-config-check

查看更多 →

手动同步xDM-F数据 操作场景 创建xDM-F同步任务后，您可将xDM-F应用下的模型数据同步到LinkX-F。仅当xDM-F同步任务的任务状态为正在工作时，可使用手动同步功能即时同步对应的xDM-F数据。 前提条件 已获取企业级管理员的账号和密码。 操作步骤 登录LinkX-F系统首页。

查看更多 →

同步Kafka数据至ClickHouse 您可以通过创建Kafka引擎表将Kafka数据自动同步至ClickHouse集群，具体操作详见本章节描述。 前提条件 已创建Kafka集群。已安装Kafka客户端，详细可以参考安装客户端。 已创建ClickHouse集群，并且ClickH

查看更多 →

擎与对应基础版数据建模引擎间的数据连接通道开关，完成了应用部署。 创建xDM-F数据同步任务。 在xDM-F同步任务页面，为将要同步的应用创建xDM-F同步任务。 手动同步xDM-F模型数据。 在xDM-F同步任务页面，执行手动同步操作可立即为您同步xDM-F数据。 发布LinkX-F数据模型。

查看更多 →