Hive CBO原理介绍 Hive CBO原理介绍 CBO，全称是Cost Based Optimization，即基于代价的优化器。 其优化目标是： 在编译阶段，根据查询语句中涉及到的表和查询条件，计算出产生中间结果少的高效join顺序，从而减少查询时间和资源消耗。 Hive中实现CBO的总体过程如下：

查看更多 →

迁移作业原理 数据迁移模型 CDM 数据迁移时，简化的迁移模型如图1所示。 图1 CDM数据迁移模型 CDM通过数据迁移作业，将源端数据迁移到目的端数据源中。其中，主要运行逻辑如下： 数据迁移作业提交运行后，CDM会根据作业配置中的“抽取并发数”参数，将每个作业拆分为多个Task，即作业分片。

查看更多 →

备份原理及方案 RDS实例支持自动备份和手动备份，您可以定期对数据库进行备份，当数据库故障或数据损坏时，可以通过备份文件恢复数据库，从而保证数据可靠性。 云数据库RDS通过Sysbench导入数据模型和一定量的数据，备份后压缩比约为80%。其中，重复数据越多，压缩比越高。 压缩比

查看更多 →

优化Jedis连接池 方案概述 JedisPool是Jedis客户端的连接池，合理设置JedisPool资源池参数能够有效地提升Redis性能与资源利用率。本文档将对JedisPool的使用和资源池的参数配置提供详细的说明和配置建议。 JedisPool使用方法 以Jedis 5

查看更多 →

地址即使使用//*FORCE_MASTER*/也不会路由到主节点。 连接池设置 使用连接池时，需要设置连接探活机制（如jdbc连接池和Druid连接池设置testOnBorrow=true，HikariCP连接池设置connectionTestQuery="SELECT 1"），确保部分连接超时断开时不会被继续使用。

查看更多 →

设备孪生工作原理 边缘节点纳管后，会在边缘节点上安装Edge Agent，其中终端设备管理相关组件如下所示。 EdgeHub：WebSocket客户端，包括同步云端资源更新、报告边缘节点和终端设备信息到云端等功能。 DeviceTwin：设备孪生，负责存储终端设备状态并将设备状态同步到云端。

查看更多 →

设备孪生工作原理 边缘节点纳管后，会在边缘节点上安装Edge Agent，其中终端设备管理相关组件如下所示。 EdgeHub：WebSocket客户端，包括同步云端资源更新、报告边缘节点和终端设备信息到云端等功能。 DeviceTwin：设备孪生，负责存储终端设备状态并将设备状态同步到云端。

查看更多 →

背景与原理（BPM） 工单管理模块中的工单场景业务编排是通过AstroZero的流程编排BPM（Business Process Management）功能实现的，通过在前端页面调用BPM完成工单流转，即客服人员创单，派单员派发工单，维修工程师处理工单的全过程。 开发BPM即是对

查看更多 →

增量迁移原理介绍 文件增量迁移 关系数据库增量迁移 HBase/CloudTable增量迁移 MongoDB/DDS增量迁移 父主题： 数据迁移进阶实践

查看更多 →

增量迁移原理介绍 文件增量迁移 关系数据库增量迁移 HBase/CloudTable增量迁移 父主题： 关键操作指导

查看更多 →

增量迁移原理介绍 文件增量迁移 关系数据库增量迁移 HBase/CloudTable增量迁移 MongoDB/DDS增量迁移 父主题： 关键操作指导

查看更多 →

ApacheHttpAsyncClient连接池id - ENUM LAST available 空闲数量 连接池空闲连接数量 - INT SUM leased 占用数量 连接池占用连接数量 - INT SUM max 最大数量 连接池最大连接数量 - INT MAX pending 正在连接数 连接池正在连接数

查看更多 →

说明 数据源 连接地址 连接地址。 驱动 驱动名称。 初始化连接数 初始化连接数。 连接池最小空闲数 连接池最小空闲数。 连接池最大空闲数 连接池最大空闲数。 连接池最大连接量 最大池中连接数。 空闲连接数 空闲连接数。 最大空闲连接数 实际出现的最大空闲连接数。 活跃连接数 活跃连接数。

查看更多 →

ds1: // 数据库直接点配置, 需要和MAS服务中连接池中命名一致 driverClassName: com.mysql.jdbc.Driver // 驱动名称，自定义 jdbcUrl: jdbc:mysql://127.0.0.1:3306/ds0 // 数据库地址，和MAS服务配置一致

查看更多 →

中。 通过JDBC连接池连接DDM 介绍如何通过JDBC连接池与DDM对接，实现数据操作。 通过Navicat客户端连接DDM实例 介绍如何获取弹性公网的IP地址，并通过Navicat客户端连接DDM实例。 通过 数据复制服务 （DRS）将RDS for MySQL数据迁移到DDM 介绍如何通过DRS服务将RDS

查看更多 →

ds1: // 数据库直接点配置, 需要和MAS服务中连接池中命名一致 driverClassName: com.mysql.jdbc.Driver // 驱动名称，自定义 jdbcUrl: jdbc:mysql://127.0.0.1:3306/ds0 // 数据库地址，和MAS服务配置一致

查看更多 →

sources: ds1: // 需要和MAS服务中连接池中命名一致 driverClassName: com.mysql.jdbc.Driver // 驱动名称，自定义 jdbcUrl: jdbc:mysql://127.0.0.1:3306/ds0 // 数据库地址，和MAS服务配置一致

查看更多 →

APP认证工作原理 构造规范请求。 将待发送的请求内容按照与API网关（即API管理）后台约定的规则组装，确保客户端签名、API网关后台认证时使用的请求内容一致。 使用规范请求和其他信息创建待签字符串。 使用AK/SK和待签字符串计算签名。 将生成的签名信息作为请求消息头添加到H

查看更多 →

只读落后自愈技术原理 TaurusDB是存储计算分离架构的云原生数据库，只读节点和主节点共享底层的存储数据。为了保证内存中的缓存数据的一致性，主节点与只读节点通信后，只读节点需要从Log Stores中读取主节点产生的redo来更新内存中的缓存数据。 图1 只读落后自愈技术原理图 主节点与只读节点的通信

查看更多 →

背景及原理（服务编排） AstroZero的服务编排，支持对逻辑判断组件、数据处理组件，以及脚本、子服务编排、商业对象等进行可视化组合编排，实现丰富的业务功能。 了解服务编排 在传统的开发中程序员一般是基于代码进行开发，程序员需要学习内容较多，开发效率相对低一些，开发门槛也高。A

查看更多 →

Spark基本原理 Spark简介 Spark是一个开源的，并行数据处理框架，能够帮助用户简单、快速的开发大数据应用，对数据进行离线处理、流式处理、交互式分析等。 Spark提供了一个快速的计算、写入及交互式查询的框架。相比于Hadoop，Spark拥有明显的性能优势。Spark

查看更多 →