数据仓库服务 GaussDB(DWS)

 

GaussDB(DWS)是一款具备分析及混合负载能力的分布式数据库,支持x86和Kunpeng硬件架构,支持行存储与列存储,提供GB~PB级数据分析能力、多模分析和实时处理能力,用于数据仓库、数据集市、实时分析、实时决策和混合负载等场景,广泛应用于汽车、制造、零售、物流、互联网、金融、政府、电信等行业分析决策系统

 
 

    数据仓库的设计流程原理 更多内容
  • 背景和原理(对象)

    存在数据库大宽表中)。 您可以围绕对象这一核心,定义相关字段、字段校验规则、界面样式、字段变更时触发事件等。如果把待开发业务系统比作一部电影,对象就是电影中一个个角色,需要勾勒角色外貌、性格特点、人物关系和所经历剧情。 租户开发者可以自定义对象(Custom Obje

    来自:帮助中心

    查看更多 →

  • Hive CBO原理介绍

    计算出代价最小的一个计划,作为最终顺序优化结果。 代价具体计算方法: 当前版本,代价衡量基于Join出来数据条数:Join出来条数越少,代价越小。Join条数多少,取决于参与Join选择率。表数据条数,取自表级别的统计信息。 过滤条件过滤后条数,由列级别的统计信息,max,min,以及NDV(Number

    来自:帮助中心

    查看更多 →

  • 备份原理及方案

    磁盘空间。 图2 副本集备份原理图 单节点实例 单节点备份是在仅有的一个节点上进行,最终备份文件将以压缩包形式存储在 对象存储服务 (OBS)中,不会占用实例磁盘空间。 单节点备份基于mongodump实现,备份过程中会额外占用节点CPU、内存等资源,资源不足时会出

    来自:帮助中心

    查看更多 →

  • 节点伸缩原理

    池需要扩容节点数量。 Simulator: 负责缩容场景下,找到满足缩容条件节点。 Expander: 负责在扩容场景下,根据用户设置不同策略来,从Estimator选出节点池中,选出一个最佳选择。当前Expander有多种策略,如表1。 表1 CCE支持Expander策略

    来自:帮助中心

    查看更多 →

  • 迁移作业原理

    取决于源端数据源性能。 如需优化,请参见源端数据源相关说明文档。 网络带宽 CDM 集群与数据源之间可以通过内网、公网VPN、NAT或专线等方式互通。 通过内网互通时,网络带宽是根据不同CDM实例规格带宽限制。 cdm.large实例规格CDM集群网卡基准/最大带宽为0

    来自:帮助中心

    查看更多 →

  • DDoS调度中心的工作原理是什么?

    DDoS调度中心工作原理是什么? 购买DDoS原生防护-全力防基础版后,通过配置DDoS阶梯调度策略,可以自动联动调度DDoS高防对DDoS原生防护-全力防基础版防护云资源进行防护,防御海量攻击。 配置DDoS阶梯调度后,当发生海量攻击时,系统联动调度DDoS高防对DDoS原

    来自:帮助中心

    查看更多 →

  • 设计原则

    设计原则 以下是常用性能优化指导原则: 中心化原则:识别支配性工作量负载功能,并使其处理过程最小化,把注意力集中在对性能影响最大部分进行提升。 本地化原则:选择靠近活动、功能和结果资源;避免通过间接方式去达到目的,导致通信量或者处理量大辐增加,性能大辐下降。 共享资源:

    来自:帮助中心

    查看更多 →

  • 设计优化

    设计优化 PERF05-01 设计优化 父主题: PERF05 性能优化

    来自:帮助中心

    查看更多 →

  • 设计原则

    故障对系统造成影响,并持续稳定地运行,建议遵循以下设计原则。 高可用设计 单点故障会导致整个系统崩溃、主要功能受到影响、任务延误系统轻度损坏或存在较大故障隐患,因此系统高可用设计非常关键。 高可用设计主要手段是冗余,甚至是多级冗余组合,包括异地容灾方式保证灾难情况下无单点:

    来自:帮助中心

    查看更多 →

  • 设计原则

    最小化身份:尽可能减少非必要系统管理员,定时清理过期身份。 最小化权限:给予用户或实体最小必要权限来执行其工作,以降低潜在安全风险。 最小化暴露面:对不同访问区域和访问对象,仅暴露最小服务端点和最少服务应用接口。 最小化凭证:尽量消除对长期、静态凭证依赖。 数据安全保护原则(Data

    来自:帮助中心

    查看更多 →

  • 设计架构

    。 架构图需要体现使用到华为云服务资源种类和数量。 需要在架构图体现部署了哪些业务。 华为云服务必须使用对应华为云图标,自建服务使用第三方图标或者自定义图标,如果使用自定义图标,需要对图标说明是“XX自建服务”。 华为云 服务器 不能使用默认 弹性云服务器 ”或者“E

    来自:帮助中心

    查看更多 →

  • 设计中心

    设计中心 解决方案工作台提供设计引擎,用户可在线进行解决方案技术架构设计(含集成架构、部署架构)、信息架构设计。 技术架构设计 信息架构设计 父主题: 标准空间

    来自:帮助中心

    查看更多 →

  • VN设计

    VN设计 通过对不同业务划分为不同VN,实现生产业务、办公业务、多媒体业务同类型业务正常互通,不同类型业务隔离不互通。 同时为生产、办公、多媒体、等不同业务分配不同比例带宽,保障网络拥塞时各业务流量都能得到调度。 父主题: 用户业务设计

    来自:帮助中心

    查看更多 →

  • 表设计

    设计 总体上讲,良好设计需要遵循以下原则: 减少需要扫描数据量。通过分区表剪枝机制可以大幅减少数据扫描量。 尽量减少随机I/O。通过聚簇可以实现热数据连续存储,将随机I/O转换为连续I/O,从而减少扫描I/O代价。 选择分区方案 当表中数据量很大时,应当对表进行分区,一般需要遵循以下原则:

    来自:帮助中心

    查看更多 →

  • 约束设计

    约束设计 DEFAULT和NULL约束 如果能够从业务层面补全字段值,那么,不建议使用DEFAULT约束,避免数据加载时产生不符合预期结果。 给明确不存在NULL值字段加上NOT NULL约束。优化器会在特定场景下对其进行自动优化。 给可以显式命名约束显式命名。除了NOT

    来自:帮助中心

    查看更多 →

  • 约束设计

    约束设计 DEFAULT和NULL约束 【建议】如果能够从业务层面补全字段值,那么,就不建议使用DEFAULT约束,避免数据加载时产生不符合预期结果。 【建议】给明确不存在NULL值字段加上NOT NULL约束,优化器会在特定场景下对其进行自动优化。 【建议】给可以显式命名约束显式命名。除了NOT

    来自:帮助中心

    查看更多 →

  • 表设计

    le占用了大量宝贵网络资源,减少不必要数据shuffle,可以减少网络压力,使数据处理本地化,以提高集群性能和可支持并发度。通过对关联条件和分组条件仔细设计,能够尽可能减少不必要数据shuffle。 选择分布方案 表分布方式选择如表2 表分布方式及使用场景所示。

    来自:帮助中心

    查看更多 →

  • 约束设计

    约束设计 DEFAULT和NULL约束 如果能够从业务层面补全字段值,那么,不建议使用DEFAULT约束,避免数据加载时产生不符合预期结果。 给明确不存在NULL值字段加上NOT NULL约束,优化器会在特定场景下对其进行自动优化。 给可以显式命名约束显式命名。除了NOT

    来自:帮助中心

    查看更多 →

  • 表设计

    设计 总体上讲,良好设计需要遵循以下原则: 减少需要扫描数据量。通过分区表剪枝机制可以大幅减少数据扫描量。 尽量减少随机I/O。通过聚簇可以实现热数据连续存储,将随机I/O转换为连续I/O,从而减少扫描I/O代价。 选择分区方案 当表中数据量很大时,应当对表进行分区,一般需要遵循以下原则:

    来自:帮助中心

    查看更多 →

  • 使用前必读

    了解如何设计表以实现良好性能。 GaussDB (DWS)开发设计规范介绍数据库应用程序开发过程中,应当遵守设计规范。依据这些规范进行建模,能够更好契合GaussDB(DWS)分布式处理架构,输出更高效业务SQL代码。 对业务执行效率不满意,期望通过调优加快业务执行情况下

    来自:帮助中心

    查看更多 →

  • 标准数仓开发指南(8.1.3.x)

    了解如何设计表以实现良好性能。 GaussDB(DWS)开发设计规范介绍数据库应用程序开发过程中,应当遵守设计规范。依据这些规范进行建模,能够更好契合GaussDB(DWS)分布式处理架构,输出更高效业务SQL代码。 对业务执行效率不满意,期望通过调优加快业务执行情况下

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了