中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    数据同步原理 更多内容
  • 备份原理及方案

    备份原理及方案 RDS实例支持自动备份和手动备份,您可以定期对数据库进行备份,当数据库故障或数据损坏时,可以通过备份文件恢复数据库,从而保证数据可靠性。 云数据库RDS通过Sysbench导入数据模型和一定量的数据,备份后压缩比约为80%。其中,重复数据越多,压缩比越高。 压缩比

    来自:帮助中心

    查看更多 →

  • 产品架构和功能原理

    查和校验后,执行导入命令将数据恢复到目标数据库实时同步基本原理 图4 实时同步原理 实时同步功能实现源数据库和目标数据库数据长期同步,主要用于OLTP到OLAP、OLTP到大数据组件的数据实时同步。全量和增量的数据同步实时迁移的技术原理基本一致,但是基于不同的业务使用场景,两个功能还是有些差异。

    来自:帮助中心

    查看更多 →

  • 背景和原理(对象)

    背景和原理(对象) AstroZero提供的数据对象(Object)定义功能,对应传统方式开发业务系统中的创建数据库表。每个Object对应一张数据库表,用于保存业务系统需要的配置数据和业务数据。 对象用于存储组织或者业务特有的数据,可理解为数据库中的数据表(逻辑表,系统实际存储

    来自:帮助中心

    查看更多 →

  • 背景与原理(BPM)

    背景与原理(BPM) 工单管理模块中的工单场景业务编排是通过AstroZero的流程编排BPM(Business Process Management)功能实现的,通过在前端页面调用BPM完成工单流转,即客服人员创单,派单员派发工单,维修工程师处理工单的全过程。 开发BPM即是对

    来自:帮助中心

    查看更多 →

  • 增量迁移原理介绍

    增量迁移原理介绍 文件增量迁移 关系数据库增量迁移 HBase/CloudTable增量迁移 MongoDB/DDS增量迁移 父主题: 进阶实践

    来自:帮助中心

    查看更多 →

  • Hive CBO原理介绍

    不同维度表的选择率,详情如表1所示。 表1 数据过滤 表名 原始数据条数 过滤后数据条数 选择率 date_dim 73000 6200 8.5% item 18000 19 0.1% 上述表格获取到原始表的数据条数,估算出过滤后的数据条数后,计算出选择率=过滤后条数/原始条数。

    来自:帮助中心

    查看更多 →

  • 备份原理及方案

    备份原理及方案 DDS实例支持自动备份和手动备份,您可以定期对数据库进行备份,当数据库故障或数据损坏时,可以通过备份文件恢复数据库,从而保证数据可靠性。 备份原理 集群实例 集群实例由dds mongos(路由)、Config(配置)和Shard(分片)组件构成。其中,Confi

    来自:帮助中心

    查看更多 →

  • 迁移作业原理

    迁移作业原理 数据迁移模型 CDM 数据迁移时,简化的迁移模型如图1所示。 图1 CDM数据迁移模型 CDM通过数据迁移作业,将源端数据迁移到目的端数据源中。其中,主要运行逻辑如下: 数据迁移作业提交运行后,CDM会根据作业配置中的“抽取并发数”参数,将每个作业拆分为多个Task,即作业分片。

    来自:帮助中心

    查看更多 →

  • 节点伸缩原理

    节点伸缩原理 HPA是针对Pod级别的,可以根据负载指标动态调整副本数量,但是如果集群的资源不足,新的副本无法运行的情况下,就只能对集群进行扩容。 CCE集群弹性引擎是Kubernetes提供的集群节点弹性伸缩组件,根据Pod调度状态及资源使用情况对集群的节点进行自动扩容缩容,同

    来自:帮助中心

    查看更多 →

  • 备份原理及方案

    备份原理及方案 RDS实例支持自动备份和手动备份,您可以定期对数据库进行备份,当数据库故障或数据损坏时,可以通过备份文件恢复数据库,从而保证数据可靠性。 云数据库RDS通过Sysbench导入数据模型和一定量的数据,备份后压缩比约为80%。其中,重复数据越多,压缩比越高。 压缩比

    来自:帮助中心

    查看更多 →

  • 迁移作业原理

    迁移作业原理 数据迁移模型 CDM数据迁移时,简化的迁移模型如图1所示。 图1 CDM数据迁移模型 CDM通过数据迁移作业,将源端数据迁移到目的端数据源中。其中,主要运行逻辑如下: 数据迁移作业提交运行后,CDM会根据作业配置中的“抽取并发数”参数,将每个作业拆分为多个Task,即作业分片。

    来自:帮助中心

    查看更多 →

  • 基本原理

    基本原理 通常UDP Flood的防御方式有两种,一种是动态指纹学习,一种是UDP限流,前者可能会将正常的业务载荷学习成攻击指纹,容易造成误杀,后者会将正常流量和攻击流量一起进行阻断,影响您的正常业务使用。 图1 设备防护原理图 如图2所示,华为云解决方案通过在UDP报文中增加水

    来自:帮助中心

    查看更多 →

  • 备份原理及方案

    备份原理及方案 RDS实例支持自动备份和手动备份,您可以定期对数据库进行备份,当数据库故障或数据损坏时,可以通过备份文件恢复数据库,从而保证数据可靠性。 云数据库RDS通过Sysbench导入数据模型和一定量的数据,备份后压缩比约为80%。其中,重复数据越多,压缩比越高。 压缩比

    来自:帮助中心

    查看更多 →

  • 备份原理及方案

    备份原理及方案 RDS实例支持自动备份和手动备份,您可以定期对数据库进行备份,当数据库故障或数据损坏时,可以通过备份文件恢复数据库,从而保证数据可靠性。 云数据库RDS通过Sysbench导入数据模型和一定量的数据,备份后压缩比约为80%。其中,重复数据越多,压缩比越高。 压缩比

    来自:帮助中心

    查看更多 →

  • 数据同步功能使用指引

    擎与对应基础版数据建模引擎间的数据连接通道开关,完成了应用部署。 创建xDM-F数据同步任务。 在xDM-F同步任务页面,为将要同步的应用创建xDM-F同步任务。 手动同步xDM-F模型数据。 在xDM-F同步任务页面,执行手动同步操作可立即为您同步xDM-F数据。 发布LinkX-F数据模型。

    来自:帮助中心

    查看更多 →

  • 同步数据至单副本实例

    在页面左上角单击,选择“数据库 > 云数据库 GaussDB ”,进入云数据库 GaussDB信息页面。 在“实例管理”页面,选择目标实例,单击操作列的“更多 > 同步到单副本实例”。 图1 实例列表同步到单副本实例 在弹出框中,选择目标实例,单击“确定”进行数据同步。 图2 同步到单副本实例

    来自:帮助中心

    查看更多 →

  • HTAP数据同步库配置校验

    HTAP数据同步库配置校验 功能介绍 HTAP数据同步库配置校验。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/instances/{instance_id}/starrocks/databases/replication/database-config-check

    来自:帮助中心

    查看更多 →

  • 手动同步xDM-F数据

    手动同步xDM-F数据 操作场景 创建xDM-F同步任务后,您可将xDM-F应用下的模型数据同步到LinkX-F。仅当xDM-F同步任务的任务状态为正在工作时,可使用手动同步功能即时同步对应的xDM-F数据。 前提条件 已获取企业级管理员的账号和密码。 操作步骤 登录LinkX-F系统首页。

    来自:帮助中心

    查看更多 →

  • 同步Kafka数据至ClickHouse

    同步Kafka数据至ClickHouse 您可以通过创建Kafka引擎表将Kafka数据自动同步至ClickHouse集群,具体操作详见本章节描述。 前提条件 已创建Kafka集群。已安装Kafka客户端,详细可以参考安装客户端。 已创建ClickHouse集群,并且ClickH

    来自:帮助中心

    查看更多 →

  • 同步设备配置数据到NetEco

    周期性自动同步 NetEco每5天向设备发起1次数据同步同步时间固定,可一定程度上保障数据同步,但同步周期较长。 触发性自动同步 当设备配置数据发生变更,或者设备添加或移除部件时,会向NetEco发出同步通知,NetEco在收到通知后立即发起数据同步。 由于网络原因,NetEco可

    来自:帮助中心

    查看更多 →

  • 创建CDL数据同步任务作业

    Topic与表的映射关系。 用于指定某个表的数据发送到指定的Topic中,开启多分区功能后需要配置Topic的分区数,分区数必须大于1。 MRS 3.3.0及之后版本,数据过滤时间用于过滤数据,当源端数据的时间小于设定时间时,该数据将会被丢弃,当源端数据的时间大于设定时间时,该数据发送到下游。 单击显示该参数。如果“Connect

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了