数据仓库服务 GaussDB(DWS)

 

GaussDB(DWS)是一款具备分析及混合负载能力的分布式数据库,支持x86和Kunpeng硬件架构,支持行存储与列存储,提供GB~PB级数据分析能力、多模分析和实时处理能力,用于数据仓库、数据集市、实时分析、实时决策和混合负载等场景,广泛应用于汽车、制造、零售、物流、互联网、金融、政府、电信等行业分析决策系统

 
 

    数据仓库的设计步骤 更多内容
  • 步骤1:流程设计

    - 数据迁移周期:天、小时、分钟还是实时迁移 天 - 数据源与目的数据源之间网络带宽 100MB - 数据源和集成工具之间网络连通性描述 本示例不涉及 - 数据库类迁移,调研表个数,最大表规模 本示例不涉及,本示例需要从OBS文件迁移到数据库 了解数据库迁移作业规模,了解最大表的迁移时间是否可接受

    来自:帮助中心

    查看更多 →

  • 步骤4:业务设计

    BO:抽象对象,不能实例化,没有对应数据库表,需要和业务对象有个继承操作。例如,业务对象A继承一个抽象对象B,则B中字段都会被A继承过来。 Value Object:值对象,不能单独存在,需要和业务对象建立聚合关系。 本示例中,拖拽三个BO对象到设计区,选中对应BO,修改对象名称为U

    来自:帮助中心

    查看更多 →

  • 步骤5:数据架构设计

    _sdi_db中原始数据表。 图26 逆向数据库 逆向数据库成功后,单击“关闭”。逆向后表为草稿状态,在单击“发布”后,在列表中可查看导入并发布表。 图27 查看表 请参照以下步骤,新建一个“标准出行数据”标准化业务表。 在“数仓规划”页签中,单击新建DWI关系模型,

    来自:帮助中心

    查看更多 →

  • 数据仓库

    数据仓库 华为云数据仓库高级工程师培训 父主题: 培训服务

    来自:帮助中心

    查看更多 →

  • 数据仓库

    octopus:dataWarehouse:list √ √ 获取数据仓库数据列表 POST /v1.0/{project_id}/common/warehouses/{data_warehouse_id}/data octopus:dataWarehouse:list √ √ 父主题: 权限和授权项

    来自:帮助中心

    查看更多 →

  • 数据仓库

    数据仓库 获取数据仓库列表信息 获取数据仓库数据列表 父主题: API

    来自:帮助中心

    查看更多 →

  • 数据仓库规格

    数据仓库规格 GaussDB (DWS)规格按照产品类型分为存算一体和存算分离。其中存算一体还包含单机版模式。各产品类型不同差异,详情请参见数据仓库类型。 低配置集群,如内存16G、vCPU4核及以下规格,建议不要用于生产环境,可能会导致资源过载风险。 存算一体规格 存算一体

    来自:帮助中心

    查看更多 →

  • 数据仓库类型

    布,但是元数据和索引存储在本地,仍然需要进行重分布。存算分离表在重分布时,表只支持读,元数据重分布时间一般比较短,但是,如果表上创建了索引,索引会影响重分布性能,重分布完成时间与索引数据量成正比关系,在此期间,表只支持读。 存算一体(单机部署)不支持分布式模式,因此不支持扩缩容、逻辑集群、资源管理等操作。

    来自:帮助中心

    查看更多 →

  • 维度建模

    指标配置,单击添加,选择之前创建衍生指标和复合指标。最后单击右下角发布,勾选自助审批。 图7 汇总表3 查看汇总表,状态为发布状态。 数据集市是面向数据应用为出发点,一个数据集市可以支持多个相关数据应用。数据集市作用与指标汇总层类似,但服务目标系统只是指标汇总层一部分,因此集市比指标汇总层更面向应用和用户。

    来自:帮助中心

    查看更多 →

  • 流程设计

    *责任人 流程责任人,可以手动输入名字或直接选择已有的责任人。 描述 流程描述信息。 上传模板,单击添加文件,选择填写后流程模板,然后上传文件即可。 图3 流程设计3 导入参数配置说明 表3 参数配置说明 参数名 说明 更新已有数据 如果所要导入流程,在规范设计中已经存在,是否更新已有的流程。支持以下选项:

    来自:帮助中心

    查看更多 →

  • 设计原则

    设计原则 以下是常用性能优化指导原则: 中心化原则:识别支配性工作量负载功能,并使其处理过程最小化,把注意力集中在对性能影响最大部分进行提升。 本地化原则:选择靠近活动、功能和结果资源;避免通过间接方式去达到目的,导致通信量或者处理量大辐增加,性能大辐下降。 共享资源:

    来自:帮助中心

    查看更多 →

  • 设计优化

    设计优化 PERF05-01 设计优化 父主题: PERF05 性能优化

    来自:帮助中心

    查看更多 →

  • 设计原则

    故障对系统造成影响,并持续稳定地运行,建议遵循以下设计原则。 高可用设计 单点故障会导致整个系统崩溃、主要功能受到影响、任务延误系统轻度损坏或存在较大故障隐患,因此系统高可用设计非常关键。 高可用设计主要手段是冗余,甚至是多级冗余组合,包括异地容灾方式保证灾难情况下无单点:

    来自:帮助中心

    查看更多 →

  • 设计原则

    最小化身份:尽可能减少非必要系统管理员,定时清理过期身份。 最小化权限:给予用户或实体最小必要权限来执行其工作,以降低潜在安全风险。 最小化暴露面:对不同访问区域和访问对象,仅暴露最小服务端点和最少服务应用接口。 最小化凭证:尽量消除对长期、静态凭证依赖。 数据安全保护原则(Data

    来自:帮助中心

    查看更多 →

  • 约束设计

    约束设计 DEFAULT和NULL约束 如果能够从业务层面补全字段值,那么,不建议使用DEFAULT约束,避免数据加载时产生不符合预期结果。 给明确不存在NULL值字段加上NOT NULL约束,优化器会在特定场景下对其进行自动优化。 给可以显式命名约束显式命名。除了NOT

    来自:帮助中心

    查看更多 →

  • 约束设计

    约束设计 DEFAULT和NULL约束 【建议】如果能够从业务层面补全字段值,那么,就不建议使用DEFAULT约束,避免数据加载时产生不符合预期结果。 【建议】给明确不存在NULL值字段加上NOT NULL约束,优化器会在特定场景下对其进行自动优化。 【建议】给可以显式命名约束显式命名。除了NOT

    来自:帮助中心

    查看更多 →

  • 设计架构

    。 架构图需要体现使用到华为云服务资源种类和数量。 需要在架构图体现部署了哪些业务。 华为云服务必须使用对应华为云图标,自建服务使用第三方图标或者自定义图标,如果使用自定义图标,需要对图标说明是“XX自建服务”。 华为云 服务器 不能使用默认 弹性云服务器 ”或者“E

    来自:帮助中心

    查看更多 →

  • 设计中心

    设计中心 解决方案工作台提供设计引擎,用户可在线进行解决方案技术架构设计(含集成架构、部署架构)、信息架构设计。 技术架构设计 信息架构设计 父主题: 标准空间

    来自:帮助中心

    查看更多 →

  • 表设计

    设计 总体上讲,良好设计需要遵循以下原则: 减少需要扫描数据量。通过分区表剪枝机制可以大幅减少数据扫描量。 尽量减少随机I/O。通过聚簇可以实现热数据连续存储,将随机I/O转换为连续I/O,从而减少扫描I/O代价。 选择分区方案 当表中数据量很大时,应当对表进行分区,一般需要遵循以下原则:

    来自:帮助中心

    查看更多 →

  • VN设计

    VN设计 通过对不同业务划分为不同VN,实现生产业务、办公业务、多媒体业务同类型业务正常互通,不同类型业务隔离不互通。 同时为生产、办公、多媒体、等不同业务分配不同比例带宽,保障网络拥塞时各业务流量都能得到调度。 父主题: 用户业务设计

    来自:帮助中心

    查看更多 →

  • 表设计

    le占用了大量宝贵网络资源,减少不必要数据shuffle,可以减少网络压力,使数据处理本地化,以提高集群性能和可支持并发度。通过对关联条件和分组条件仔细设计,能够尽可能减少不必要数据shuffle。 选择分布方案 表分布方式选择如表2 表分布方式及使用场景所示。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了