数据仓库服务 GaussDB(DWS)

 

GaussDB(DWS)是一款具备分析及混合负载能力的分布式数据库,支持x86和Kunpeng硬件架构,支持行存储与列存储,提供GB~PB级数据分析能力、多模分析和实时处理能力,用于数据仓库、数据集市、实时分析、实时决策和混合负载等场景,广泛应用于汽车、制造、零售、物流、互联网、金融、政府、电信等行业分析决策系统

 
 

    数据仓库整合层模型设计 更多内容
  • 设计架构

    设计架构 在架构设计阶段伙伴架构师完成集成架构设计和资源清单配置。 创建技术架构 集成架构设计详细操作步骤参见集成架构设计。 伙伴架构师用户登录解决方案工作台,进入工作空间--》选择需要设计的方案--》点击“更多”下拉框--》点击“设计”,即可跳转到架构“设计中心”的页面。 图1

    来自:帮助中心

    查看更多 →

  • VN设计

    VN设计 通过对不同的业务划分为不同的VN,实现生产业务、办公业务、多媒体业务的同类型业务正常互通,不同类型业务隔离不互通。 同时为生产、办公、多媒体、等不同业务分配不同比例带宽,保障网络拥塞时各业务流量都能得到调度。 父主题: 用户业务设计

    来自:帮助中心

    查看更多 →

  • 表设计

    设计 总体上讲,良好的表设计需要遵循以下原则: 减少需要扫描的数据量。通过分区表的剪枝机制可以大幅减少数据的扫描量。 尽量减少随机I/O。通过聚簇可以实现热数据的连续存储,将随机I/O转换为连续I/O,从而减少扫描的I/O代价。 选择分区方案 当表中的数据量很大时,应当对表进行分区,一般需要遵循以下原则:

    来自:帮助中心

    查看更多 →

  • 设计原则

    设计原则 以下是常用的性能优化指导原则: 中心化原则:识别支配性工作量负载功能,并使其处理过程最小化,把注意力集中在对性能影响最大的部分进行提升。 本地化原则:选择靠近的活动、功能和结果的资源;避免通过间接的方式去达到目的,导致通信量或者处理量大辐增加,性能大辐下降。 共享资源:

    来自:帮助中心

    查看更多 →

  • 设计原则

    进行任何通信之前都将通过显式的验证,减少系统信任带来的攻击面。零信任把现有的基于实体鉴别和默认授权的静态信任模型(非黑即白),变成基于持续风险评估和逐次授权的动态信任模型。 零信任不根据网络空间位置决定可信度,其重心在于保护资源,而不是网段。与传统安全理念对比,它将网络防御的重心

    来自:帮助中心

    查看更多 →

  • 设计原则

    故障对系统造成的影响,并持续稳定地运行,建议遵循以下设计原则。 高可用设计 单点故障会导致整个系统崩溃、主要功能受到影响、任务延误的系统轻度损坏或存在较大的故障隐患,因此系统的高可用设计非常关键。 高可用设计的主要手段是冗余,甚至是多级冗余的组合,包括异地容灾方式保证灾难情况下无单点:

    来自:帮助中心

    查看更多 →

  • 设计优化

    设计优化 PERF05-01 设计优化 父主题: PERF05 性能优化

    来自:帮助中心

    查看更多 →

  • 接入DWS数据源

    名称,方便您快速识别和查找。 描述 填写数据源的描述信息。 数据湖 分层 选择对应的数据湖分层:业务数据/操作数据/明细数据/数据汇总/数据集市/应用数据/贴源数据。 是否使用JDBC字符串 选择连接数据库模式。 否:由系统根据用户配置自动拼接数据源连接字符串。 是:由用户自己输入数据源连接字符串。

    来自:帮助中心

    查看更多 →

  • ETL映射设计

    ETL映射设计 ETL映射设计用于将数据从源系统抽取出来,经过清洗、转换、加载等一系列操作后,将数据加载到目标系统的过程。解决方案工作台支持SDI、DWI和DWR物理表、支持多种数据库、支持生成脚本等。 新建ETL映射 图1 新建ETL映射 参数 说明 映射名称 自定义 数据库数据类型

    来自:帮助中心

    查看更多 →

  • 逻辑模型

    描述信息。支持的长度为0~600个字符。 转换为物理模型后,您可以为该物理模型设置分层,您可以选择SDI或DWI。在数仓分层的未分层中找到转换后的物理模型,将光标移动到该卡片上,单击该模型的编辑按钮,进入“编辑模型”弹窗,如图12。 图12 设置物理模型分层 进入“编辑模型”弹窗后,选择“数仓分层”,下拉选择SDI或DWI分层。

    来自:帮助中心

    查看更多 →

  • DataArts Studio使用流程

    和云上的文件系统,以及关系数据库, 数据仓库 ,NoSQL,大数据云服务,对象存储等数据源。 数据集成 支持的数据源 创建 CDM 集群 新建连接 新建表/文件迁移作业 数据目录(元数据采集) 为了在 DataArts Studio 对迁移到云上的原始数据进行管理和监控,先对其元数据进行采集并监控。

    来自:帮助中心

    查看更多 →

  • 创建质量检查任务

    如果首次执行时任务终止,则重新启动时全量执行;如果增量执行时任务终止,则重新启动时从上次成功执行的完成时间开始执行质量检查。 立即执行:立即执行时治理的数据是整合/图数据中所有数据,即是全量执行,如果治理过程中出现异常或手动终止,重启后,再次全量执行。 填写完成后单击“保存”。 父主题: 质量检查任务

    来自:帮助中心

    查看更多 →

  • 主题设计

    r人员名称。 左侧列表页选中某一级后只展示下一级所有数据,选中L3业务对象展示该业务对象基本信息。 从文件导入 架构设计师进入到对应空间和方案后,选择对应信息架构的主题设计。 点击“导入”-“从文件导入”,下载资产目录导入模板。 图3 主题设计导入入口 填写模板文档后,选择添

    来自:帮助中心

    查看更多 →

  • 阶段二:规划设计

    阶段二:规划设计 业务规划设计内容如图所示: 图1 业务规划设计内容 业务云上架构设计 例如业务系统符合传统的三架构模型,首先将应用 服务器 按照三架构进行划分如下: 逻辑层级 服务器描述 逻辑层级应用规范 接入 无接入服务器 接入方式、接入安全、可靠性、可扩展性 应用 应用接口服务器

    来自:帮助中心

    查看更多 →

  • 选择表模型

    选择表模型设计数据仓库模型的时候,最常见的有两种:星型模型与雪花模型。选择哪一种模型需要根据业务需求以及性能的多重考量来定。 星型模型由包含数据库核心数据的中央事实数据表和为事实数据表提供描述性属性信息的多个维度表组成。维度表通过主键关联事实表中的外键。如图1。 所有的事实都必须保持同一个粒度。

    来自:帮助中心

    查看更多 →

  • 接入DWS数据源

    填写数据源的描述信息。 扩展ABM集群 选择对应的扩展ABM集群实例来采集该数据源的模型数据。 数据湖分层 选择对应的数据湖分层:业务数据/操作数据/明细数据/汇总数据/应用数据/贴源数据。 连接地址 仅当“是否使用JDBC字符串”选择“否”时需要配置。 填写DWS集群中数据库的连接IP地址和端口号。

    来自:帮助中心

    查看更多 →

  • 构建人口库模型、分析来源并接入

    从部门资源库采集到数仓贴源中。 选择部门资源库(来源库)、来源表,根据选择的来源表判断表的类型是实体还是明细,比如如果设定好调度周期和调度时间,保存成功后单击【推送并启用】,等待作业跑成功,可以先关闭页面,任务跑结束后会发送一个是否跑成功的系统提醒。在数仓的贴源会生成一个贴源表,如果是实体表格式为

    来自:帮助中心

    查看更多 →

  • 附录 背景信息

    脚本/作业开发 按需完成各数据的ETL脚本开发、数据同步,并基于各层数据的时间顺序、频率的要求,完成作业开发和调度执行。 完成ODS->DWI的数据同步,在此过程中完成数据的清洗转换,以及多源异构数据的整合; 完成DWI->DWR的数据同步,在DWR将数据按分析/主题维度汇

    来自:帮助中心

    查看更多 →

  • 3C电子行业(PCBA)数据模型与标准

    依据华为数据架构方法论,通过业务分析,设计生产工艺领域主题域分组/主题域/业务对象/逻辑实体/属性等5数据资产目录; 完成生产工艺领域核心数据概念模型、逻辑实体及逻辑模型设计; 完成核心数据数据标准设计,包含业务标准、技术标准等 基于所设计资产目录及模型,完成华为DGC平台元数据注册与使用验证。

    来自:帮助中心

    查看更多 →

  • 规范设计

    规范设计 配置中心 流程设计 主题设计 码表管理 数据标准 关系建模 业务指标 技术指标 维度建模 父主题: 实施步骤

    来自:帮助中心

    查看更多 →

  • 安全设计

    安全设计 有标签和安全标识。 部件安全设计满足欧盟和中国等国家和地区的准入要求。 父主题: 安全性和可靠性

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了