ETL Job 功能 通过ETL Job节点可以从指定数据源中抽取数据，经过数据准备对数据预处理后，导入到目标数据源。 目标端是DWS的ETL Job节点，不支持使用委托进行调度，建议采用兼容性更佳的公共IAM账号方式进行调度，详见配置调度身份。 参数 用户可参考表1，表2和表3配置ETL

查看更多 →

ETL映射设计 ETL映射设计用于将数据从源系统抽取出来，经过清洗、转换、加载等一系列操作后，将数据加载到目标系统的过程。解决方案工作台支持SDI、DWI和DWR层物理表、支持多种数据库、支持生成脚本等。 新建ETL映射 图1 新建ETL映射 参数 说明 映射名称 自定义 数据库数据类型

查看更多 →

添加实施作业 配置ETL Mapping。 实施作业名称：自定义； 关联需求：可选，可与新建项目时的相关需求关联起来，关联后该ETL作业将会自动在实施进度管理中展示； ETL Mapping名称：选择配置好的ETL映射； DataArts Studio 目录：选填需要将该ETL映射同步至DataArts

查看更多 →

找和维护模型，提高工作效率。 创建逻辑模型：在物理模型开发之前，通常需要先创建逻辑模型。逻辑模型是基于业务需求和数据分析结果设计的模型，它描述了数据之间的关系和业务规则。逻辑模型可以使用实体关系图（ER图）或其他建模工具进行设计和表示。在创建逻辑模型时，需要考虑数据的实体、属性、关系和约束等。

查看更多 →

按照传统的定义，元数据（Metadata）是关于数据的数据。元数据打通了源数据、 数据仓库 、数据应用，记录了数据从产生到消费的全过程。元数据主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态及ETL的任务运行状态。在数据仓库系统中，元数据可以帮助数据仓库管理员和开发人员非常方便地找到其所关心的数据

查看更多 →

数据仓库 华为云数据仓库高级工程师培训 父主题： 培训服务

查看更多 →

数据仓库 表1 数据仓库权限 权限 对应API接口 授权项（Action） IAM项目 (Project) 企业项目 (Enterprise Project) 获取数据仓库列表 GET /v1.0/{project_id}/common/warehouses octopus:dataWarehouse:list

查看更多 →

数据仓库 获取数据仓库列表信息 获取数据仓库的数据列表 父主题： API

查看更多 →

。 图10 主题设计 逻辑模型设计 逻辑模型是对描述同一特征的属性集合，指导IT系统开发与系统数据集成。本实践需要对目标系统进行建模。 新建逻辑模型。 图11 新建逻辑模型 进入创建好的逻辑模型，选择业务对象新建逻辑实体。 图12 新建逻辑实体 配置该逻辑实体的基本信息和属性。 图13

查看更多 →

逻辑复制 GS_152150028 错误码： permission denied to change owner of publication %s. 解决方案：FOR ALL TABLES发布的owner必须是系统管理员。 level： ERROR GS_152150029 错误码：

查看更多 →

逻辑集群 GS_271180008 错误码： database locale is incompatible with operating system. 解决方案：使用其他语言环境重新创建数据库或安装缺失的语言环境。 level： FATAL

查看更多 →

骤为准。 创建0层逻辑模型图。 1.工程初始化创建时会在“逻辑视图>逻辑模型”包目录下默认创建一个逻辑模型图，可当作0层逻辑模型，如果是非初始化结构建目录 ，则选择要创建图的包节点 ，单击包后的菜单，选择“新建图”。 2.图类型选择“4+1视图>逻辑视图>逻辑模型”，输入图名称，单击保存即可。

查看更多 →

。目标数据库解析逻辑日志以实时进行数据复制。具体如图1所示。逻辑复制降低了对目标数据库的形态限制，支持异构数据库、同构异形数据库对数据的同步，支持目标库进行数据同步期间的数据可读写，数据同步时延低。 图1 逻辑复制 逻辑复制由两部分组成：逻辑解码和数据复制。逻辑解码会输出以事务为

查看更多 →

逻辑解码 逻辑解码概述 逻辑解码选项 使用SQL函数接口进行逻辑解码 使用流式解码实现数据逻辑复制 父主题： 逻辑复制

查看更多 →

逻辑函数 表1 逻辑函数 SQL函数 返回类型 描述 boolean1 OR boolean2 BOOLEAN 如果 boolean1 为 TRUE 或 boolean2 为 TRUE 返回 TRUE。支持三值逻辑。 例如 true || Null(BOOLEAN) 返回 TRUE。

查看更多 →

生成逻辑日志。目标数据库解析逻辑日志以实时进行数据复制。具体如图1所示。逻辑复制降低了对目标数据库的形态限制，支持异构数据库、同构异形数据库对数据的同步，支持目标库进行数据同步期间的数据可读写，数据同步时延低。 图1 逻辑复制 逻辑复制由两部分组成：逻辑解码和数据复制。逻辑解码会

查看更多 →

逻辑复制 下面示例演示如何通过JDBC接口使用逻辑复制功能的过程。 针对逻辑复制的配置选项，除了在逻辑解码中的配置选项外，还有专门给JDBC等流式解码工具增加的配置项，如下所示： 解码线程并行度 通过配置选项parallel-decode-num，指定并行解码的Decoder线程

查看更多 →

skip-generated-columns, decode-sequence。选项的详细说明，请参考《特性指南》中“逻辑复制 > 逻辑解码 > 逻辑解码选项”章节。 该参数SIGHUP生效并不会影响已经启动的逻辑解码流程；后续逻辑解码启动将使用该参数设置作为其默认配置，如果解码任务启动命令中有相同配置项，则log

查看更多 →

逻辑解码 在逻辑解码独立多版本字典中，使用的逻辑解码字典表是系统表。逻辑解码系统表均为实例级系统表，仅管理员权限用户可以查看和修改系统表。 GS_ LOG ICAL_ATTRDEF GS_LOGICAL_ATTRIBUTE GS_LOGICAL_AUTHID GS_LOGICAL_CLASS

查看更多 →

逻辑解码 逻辑解码概述 逻辑解码选项 使用SQL函数接口进行逻辑解码 使用流式解码实现数据逻辑复制 父主题： 逻辑复制

查看更多 →

，可以将逻辑模型转化为物理模型。具体操作请参见逻辑模型转换为物理模型。 单击已新建的逻辑模型的“逻辑实体”或“逻辑属性”或“标准覆盖率”可以跳转到逻辑实体列表页面，查看该逻辑模型的详细内容。 新建逻辑实体并发布 逻辑实体即逻辑表。当您完成逻辑模型的创建之后，您就可以在逻辑模型中新建逻辑实体。

查看更多 →