信息架构设计 创建信息架构 主题设计 逻辑模型设计 物理模型设计 ETL映射设计 业务指标设计 配置管理 父主题： 设计中心

查看更多 →

查看查询结果 操作步骤 在数据服务左侧导航，选择“工具箱>数据开发>数据探索”。 在对应的“任务名称”列下，单击任务名称。 在任务信息界面，可以进行如下操作。 指标趋势-统计 选择图标切换绘图类型，同时选择表头切换需要显示的数据。 缺失值分析 选择列表头（可同时选择多列），在弹出

查看更多 →

系统函数（Netezza） ISNULL() Netezza语法 迁移后语法 1 2 3 4 5 SELECT A.ETL_DATE, A.BRANCH_CODE, A.CUST_NO , ISNULL ( B.RES_STOCK,0) AS RES_STOCK

查看更多 →

Hive基本原理 Hive是建立在Hadoop上的 数据仓库 基础构架。它提供了一系列的工具，可以用来进行数据提取转化加载（ETL），这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive定义了简单的类SQL查询语言，称为HQL，它允许熟悉SQL的用户查询数据。

查看更多 →

实施管理 数据调研作业 入湖清单管理 CDM 作业 ETL Mapping 数据实施质量检查 基础设施部署作业 父主题： 交付中心

查看更多 →

为什么要使用云数据仓库服务 GaussDB (DWS) ？ 传统的数据仓库售价昂贵，设备系统选型，采购周期长，扩容复杂，整体运行成本十分高昂，因此很难为中小企业所采纳。 云数据仓库服务GaussDB(DWS)与传统的数据仓库相比，主要有以下特点与显著优势： 一款分布式MPP数据仓库云化服务

查看更多 →

NOT IN ( 'ETL_JOB_NAME' ,'ETL_TX_DATE'

查看更多 →

系统表名_{TYPE简码},增量表的type简码为i,全量表的type简码为f,所有的表名称及字段名称小写 标准字段： ext_etl_dt （ETL时间），ext_src_sys_id（源系统标识），dt、ph（分区字段） 表的其他要求：采用ORC存储格式，并采用SNAPPY压缩

查看更多 →

单次启动工程 如果创建的工程（包含周期工程）需要单次执行，则需要执行本章节。 前提条件 已有待执行的工程。 操作步骤 在数据服务左侧导航，选择“工具箱>数据准备>工程列表”页签。 启动工程。 在工程列表中，在需要启动的工程对应的“操作”列下，单击。 在工程列表中，单击需要启动的工程的名称，在“工程详情”界面，单击。

查看更多 →

创建开发环境 用户在使用JupyterLab开发环境时，需要创建开发环境。 操作步骤 在数据服务左侧导航，选择“工具箱>数据开发>数据处理”。 在“任务管理”界面，单击“开发环境”。 在“环境信息”界面，单击“创建”。 在“新建环境”界面，配置参数。 作业位置：选择作业存放位置。

查看更多 →

服务环境上使用，则需要导出公共模板并将导出的公共模板压缩包提供给该用户。 前提条件 已有公共模板。 操作步骤 在数据服务左侧导航，选择“工具箱>数据准备>模板管理”页签。 选择“公共模板”页签。 在左侧目录树中单击模板所在的目录，在需要导出的模板区域，单击“操作>”。 模板发布者

查看更多 →

如何配置自定义元素构造型 当在模型设计过程中，发现现有的模型图元无法满足设计表达的要求，此时需要添加一些新类型的图元放入到工具箱中来使用。用户可以点击“新建构造型”按钮，来创建新的构造型元素，如图所示。 按上图示例，新增一个示例构型元素，如图所示： 元素类型：此处选择的类型决定图元的外观样式和默认属性。

查看更多 →

欢迎使用数据仓库服务GaussDB(DWS)。数据仓库服务是完全托管的企业级云上数据仓库服务，具备免运维、在线扩展、高效的多源数据加载能力，兼容PostgreSQL生态，并助力企业经济高效地对海量数据进行在线分析，实现数据快速变现。 您可以使用本文档提供的API对数据仓库服务的集

查看更多 →

模型类型。 关联工具箱 配置模型默认加载的可用工具箱图形库。 架构方案设置 配置模型的架构方案层级规则。 检查元素和连线 查看模型绑定的默认元素和连线。 元素构造型 新增构造型 新增自定义构造型元素。 关联视图 将基础构造型或者自定义构造型元素关联到模型的工具箱中使用。 连线构造型

查看更多 →

登录用户为具有管理员权限的用户。 管理员权限请联系运营人员添加具有“Data Lake SRE”角色的用户。 操作步骤 在数据服务左侧导航，选择“工具箱>数据准备>模板管理”页签。 选择“公共模板”页签。 在“公共模板”界面，单击“导入模板”。 在“导入模板”界面，配置信息如下。 名称：新建的公共模板的名称，自定义填写。

查看更多 →

导入私有模板 如果用户需要使用其他租户下用户的私有模板，并且已有该私有模板压缩包，则需要导入该私有模板压缩包。 操作步骤 在数据服务左侧导航，选择“工具箱>数据准备>模板管理”页签。 选择“私有模板”页签。 在“私有模板”界面，单击“导入模板”。 在“导入模板”界面，配置参数如下。 名称：新建的私有模板的名称，自定义填写。

查看更多 →

置的标签组外，用户可根据实际场景新增标签组，并对新增标签组进行自定义管理操作，包括编辑和删除操作。 操作步骤 在数据服务左侧导航，选择“工具箱>数据标注>时序数据标注”。 选择“标签组管理”页签。 新增标签组。 单击“新增标签组”。 在“新增标签组”界面，设置“标签组名称”，设置

查看更多 →

表及字段的命名规范为：ods_源系统简写_源系统表名_{TYPE简码},全量表的type简码为f,所有的表名称及字段名称小写 标准字段：ext_etl_dt （ETL时间），ext_src_sys_id（源系统标识），dt、ph（分区字段） 表的其他要求：采用ORC存储格式和SNAPPY压缩；

查看更多 →

source_sdi节点属性 demo_etl_sdi_dwi节点：为 MRS Hive SQL节点，用于清洗过滤SDI贴源层上原始表中的数据，将合法数据写入数据架构中DWI层标准出行数据表dwi_taxi_trip_data中。其中，“SQL脚本”请选择在脚本开发中创建的脚本demo_etl_sdi_dwi。

查看更多 →

表/文件迁移时支持的数据源如表1所示。 表1 表/文件迁移支持的数据源 数据源分类 源端数据源 对应的目的端数据源 说明 数据仓库 数据仓库服务（DWS） 数据仓库：数据仓库服务（DWS）， 数据湖探索 （ DLI ），MRS ClickHouse Hadoop：MRS HDFS，MRS HBase，MRS

查看更多 →

对应的目的端数据源 说明 Kafka 数据仓库服务 GaussDB(DWS) - MySQL 数据仓库服务 GaussDB(DWS) - Oracle 数据仓库服务 GaussDB(DWS) - IOT 数据仓库服务 GaussDB(DWS) - DWS 数据仓库服务 GaussDB(DWS)

查看更多 →