数据仓库服务 GaussDB(DWS)

 

GaussDB(DWS)是一款具备分析及混合负载能力的分布式数据库,支持x86和Kunpeng硬件架构,支持行存储与列存储,提供GB~PB级数据分析能力、多模分析和实时处理能力,用于数据仓库、数据集市、实时分析、实时决策和混合负载等场景,广泛应用于汽车、制造、零售、物流、互联网、金融、政府、电信等行业分析决策系统

 
 

    数据仓库表事实表 更多内容
  • 配置数据仓库服务(DWS)连接

    配置 数据仓库 服务(DWS)连接 连接数据仓库服务(DWS)时,相关参数如1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户,密码不会立即生效且作业会运行失败。 1 数据仓库服务(DWS)连接参数 参数名 说明 取值样例 名称 连接的名称,根据连

    来自:帮助中心

    查看更多 →

  • Hudi表分区设计规范

    建议使用。 建议 事实采用日期分区,维度采用非分区或者大颗粒度的日期分区 是否采用分区要根据的总数据量、增量和使用方式来决定。从的使用属性看事实和维度具有的特点: 事实:数据总量大,增量大,数据读取多以日期做切分,读取一定时间段的数据。 维度:总量相对小,增量

    来自:帮助中心

    查看更多 →

  • 数据架构操作列表

    deleteBizCatalog 查看码管理 DAYU_DS dsCodeTable getListCodeTable 创建码管理 DAYU_DS dsCodeTable createCodeTable 更新码管理 DAYU_DS dsCodeTable updateCodeTable 发布码管理 DAYU_DS

    来自:帮助中心

    查看更多 →

  • 自动建表原理介绍

    0)字段映射到DWS的SMALLINT。 图1 自动建的字段映射 CDM 在Hive中自动建时,Hive与源的字段类型映射关系参见1、2、3及4。例如使用CDM将MySQL整库迁移到Hive,CDM在Hive上自动建,会将Oracle的YEAR字段映射到Hive的DATE。

    来自:帮助中心

    查看更多 →

  • 库表设计规范

    避免使用分区,如有需要,可以使用多个独立的代替。 分区的缺点: DDL操作需要锁定所有分区,导致所有分区上操作都被阻塞。 当数据量较大时,对分区进行DDL或其他运维操作难度大风险高。 分区使用较少,存在未知风险。 当单台 服务器 性能无法满足时,对分区进行分拆的成本较高。

    来自:帮助中心

    查看更多 →

  • 创建Bucket索引表调优

    判断使用分区还是非分区 根据的使用场景一般将分为事实和维度事实通常整数据规模较大,以新增数据为主,更新数据占比小,且更新数据大多落在近一段时间范围内(年或月或天),下游读取该进行ETL计算时通常会使用时间范围进行裁剪(例如最近一天、一月、一年),这种通常可以通

    来自:帮助中心

    查看更多 →

  • 自动建表原理介绍

    0)字段映射到DWS的SMALLINT。 图1 自动建的字段映射 CDM在Hive中自动建时,Hive与源的字段类型映射关系参见1、2、3及4。例如使用CDM将MySQL整库迁移到Hive,CDM在Hive上自动建,会将Oracle的YEAR字段映射到Hive的DATE。

    来自:帮助中心

    查看更多 →

  • 数据建模

    员可以方便的按照矩阵的指引,完成维度事实等逻辑模型设计。 图7 总线矩阵 逻辑模型创建 在逻辑模型设计中,用户可以定义维度、事实等类型的逻辑模型,新增属性,添加属性编码、名称、字段类型等参数,完成逻辑模型设计,并为其分配到指定的数据域及数据分层中。 图8 逻辑模型创建 可视化设计

    来自:帮助中心

    查看更多 →

  • 查看汇总表详情

    : 维度 DIMENSION_TABLE_ATTRIBUTE: 维度属性 DIRECTORY: 目录 FACT_ATTRIBUTE: 事实属性 FACT_DIMENSION: 事实维度 FACT_ LOG IC_TABLE: 事实 FACT_MEASURE: 事实度量 FUNCTION:

    来自:帮助中心

    查看更多 →

  • 作业开发

    ETL脚本。 每个开发算子的失败策略为“终止后续节点执行计划” 建议每个画布中的作业算子不超过20个。 按事实创建调度作业画布 按照DWR层事实作业 > DWR层汇总作业顺序排列 每个作业使用作业开发算子,每个算子关联对应的ETL脚本 每个开发算子的失败策略为“终止后续节点执行计划”

    来自:帮助中心

    查看更多 →

  • 预设策略列表

    预设策略列 当您在配置审计控制台添加合规规则时,可以直接选用系统内置的预设合规策略。 当前配置审计服务支持的预设策略如下所示。 1 配置审计 支持的预设策略 云服务 预设策略 触发方式 评估资源 公共可用预设策略 资源名称满足正则达式 配置变更 全部资源 资源具有所有指定的标签键

    来自:帮助中心

    查看更多 →

  • 数据架构数据搬迁

    。 图2 导出主题 导出码 在数据架构主界面,单击左侧导航栏的“码管理”,进入码管理页面。 选择需要导出的码,然后单击列上方的“更多 > 导出”按钮,导出所选码。导出完成后,即可通过浏览器下载地址,获取到导出的xlsx文件。 图3 导出码 导出数据标准 在数据架构主

    来自:帮助中心

    查看更多 →

  • 查询集群列表

    查询集群列 功能介绍 该接口用于查询并显示集群列。 调用方法 请参见如何调用API。 URI 1 GET /v1.0/{project_id}/clusters 1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID。获取方法,请参见获取项目ID。

    来自:帮助中心

    查看更多 →

  • DWS源表(不推荐使用)

    fetch-size 否 0 Integer 每次从数据库拉取数据的行数。默认值为0,示不限制。 示例 该示例是从DWS数据源中读取数据,并写入到Print结果中,其具体步骤参考如下: 在DWS中创建相应的名为dws_order,SQL语句参考如下。 create table public

    来自:帮助中心

    查看更多 →

  • 查找主题列表(新)

    : 维度 DIMENSION_TABLE_ATTRIBUTE: 维度属性 DIRECTORY: 目录 FACT_ATTRIBUTE: 事实属性 FACT_DIMENSION: 事实维度 FACT_LOGIC_TABLE: 事实 FACT_MEASURE: 事实度量 FUNCTION:

    来自:帮助中心

    查看更多 →

  • DWS结果表(不推荐使用)

    with参数中字段只能使用单引号,不能使用双引号。 若需要使用upsert模式,则必须在DWS结果和该结果连接的DWS都定义主键。 若DWS在不同的schema中存在相同名称的,则在flink opensource sql中需要指定相应的schema。 使用gsjdbc4驱动连接时,加载的数据库驱动类为:org

    来自:帮助中心

    查看更多 →

  • 更新原子指标

    : 维度 DIMENSION_TABLE_ATTRIBUTE: 维度属性 DIRECTORY: 目录 FACT_ATTRIBUTE: 事实属性 FACT_DIMENSION: 事实维度 FACT_LOGIC_TABLE: 事实 FACT_MEASURE: 事实度量 FUNCTION:

    来自:帮助中心

    查看更多 →

  • 新建原子指标

    : 维度 DIMENSION_TABLE_ATTRIBUTE: 维度属性 DIRECTORY: 目录 FACT_ATTRIBUTE: 事实属性 FACT_DIMENSION: 事实维度 FACT_LOGIC_TABLE: 事实 FACT_MEASURE: 事实度量 FUNCTION:

    来自:帮助中心

    查看更多 →

  • 数据如何存储到数据仓库服务?

    MRS 导入数据,将MRS作为ETL。 通过COPY FROM STDIN方式导入数据。 通过COPY FROM STDIN命令写数据到一个。 使用GDS从远端服务器导入数据到 GaussDB (DWS)。 当用户需要将普通文件系统(例如, 弹性云服务器 )中的数据文件导入到GaussD

    来自:帮助中心

    查看更多 →

  • 数据仓库服务GaussDB(DWS)接入LTS

    数据仓库服务GaussDB(DWS)接入LTS 支持数据仓库GaussDB(DWS)日志接入LTS,具体接入方法请参见集群日志管理。 父主题: 使用云服务接入LTS

    来自:帮助中心

    查看更多 →

  • ALM-16045 Hive数据仓库被删除

    产生告警的主机名。 对系统的影响 Hive默认数据仓库被删除,会导致在默认数据仓库中创建库、创建失败,影响业务正常使用。 可能原因 Hive定时查看默认数据仓库的状态,发现Hive默认数据仓库被删除。 处理步骤 检查Hive默认数据仓库。 以root用户登录客户端所在节点,用户密

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了