ETL映射设计 ETL映射设计用于将数据从源系统抽取出来，经过清洗、转换、加载等一系列操作后，将数据加载到目标系统的过程。解决方案工作台支持SDI、DWI和DWR层物理表、支持多种数据库、支持生成脚本等。 新建ETL映射 图1 新建ETL映射 参数 说明 映射名称 自定义 数据库数据类型

查看更多 →

ETL Job 功能 通过ETL Job节点可以从指定数据源中抽取数据，经过数据准备对数据预处理后，导入到目标数据源。 目标端是DWS的ETL Job节点，不支持使用委托进行调度，建议采用兼容性更佳的公共IAM账号方式进行调度，详见配置调度身份。 参数 用户可参考表1，表2和表3配置ETL

查看更多 →

添加实施作业 配置ETL Mapping。 实施作业名称：自定义； 关联需求：可选，可与新建项目时的相关需求关联起来，关联后该ETL作业将会自动在实施进度管理中展示； ETL Mapping名称：选择配置好的ETL映射； DataArts Studio 目录：选填需要将该ETL映射同步至DataArts

查看更多 →

EIP，用于提供 服务器 访问公网和被公网访问能力。 创建安全组，通过配置安全组规则，为 弹性云服务器 提供安全防护。 方案优势 一体化数据建模能力 支持跨不同数据查询整合，与分布式ETL一体化。提供敏捷建模、智能计算，全面支撑各种数据准备需求。 多款展示工具 符合操作习惯的Web/Excel电子表格、分析报告、大屏设计器。

查看更多 →

Studio 数据治理中心 是一个强大的ETL工具和技术，它可以帮助开发人员设计、编写和管理ETL脚本。以下是DataArts Studio在这些方面的主要功能和优势： 可视化的ETL设计：DataArts Studio提供了一个直观的可视化界面，使开发人员能够以图形化方式设计和配置ETL流程。通过拖放组

查看更多 →

建模”。 图1 建模 在数据库的建模页面，找到需要建模的物理表，单击，即可完成建模。 您也可以单击物理表名称，在展开的页面单击“建模”。 如未修改物理表的建模信息直接单击，系统将根据读取数据时自动生成的数据模型信息进行建模。 图2 建模 完成建模后，您可单击刷新建模状态，在反向建

查看更多 →

建模 单位建模 操作路径：[WEB]建模>单位主数据>单位 新建单位： 进入功能界面后，单击"新建单位”按钮，进入新建界面 按实际需要填写单位信息 单击”确认”按钮提交数据 图1 新建单位 物料建模 物料是原材料、半成品、产成品等企业生产经营资源的总称，本功能用于定义物料的基础资料

查看更多 →

数据仓库 华为云数据仓库高级工程师培训 父主题： 培训服务

查看更多 →

数据仓库 表1 数据仓库权限 权限 对应API接口 授权项（Action） IAM项目 (Project) 企业项目 (Enterprise Project) 获取数据仓库列表 GET /v1.0/{project_id}/common/warehouses octopus:dataWarehouse:list

查看更多 →

数据仓库 获取数据仓库列表信息 获取数据仓库的数据列表 父主题： API

查看更多 →

车企数字化服务转型 大数据ETL处理 运营商大数据分析 运营商数据体量在PB~EB级，其数据种类多，有结构化的基站信息数据，非结构化的消息通信数据，同时对数据的时效性有很高的要求， DLI 服务提供批处理、流处理等多模引擎，打破数据孤岛进行统一的数据分析。 优势 大数据ETL：具备TB~EB级

查看更多 →

数据建模 分层管理 实体管理 个人中心 父主题： 管理基础工具

查看更多 →

质量建模 质检项 功能概述：该模块主要是对质检项进行管理，主要功能包括新增、编辑、删除、复制、查询质检项。 操作人员：系统管理人员。 路径：质量建模→质检项 。 图1 质检项 质检模板 功能概述：该模块主要是对质检模板进行管理，主要功能包括新增、编辑、删除、复制、查看、查询质检模板。

查看更多 →

工厂建模 基本信息 编辑组织架构、为不同组织分配不同人员、定义人员的权限 新增组织架构 单击菜单列表中工厂建模下的工厂建模，右侧出现工厂信息（包括组织架构信息、组织人员信息） 图1 工厂建模 新增工厂/公司 图2 新增工厂/公司 新增部门/车间 图3 新增部门/车间1 图4 新增部门/车间2

查看更多 →

仓库建模 以工厂为维度按仓库-库区-货位的层级维护工厂下的仓库结构及相应的属性。 系统支持仓库、库区和货位的扩展属性配置。 前提条件 已登录MBM Space，且拥有该菜单栏目的操作权限。 已维护工厂建模。 已维护仓库类型设置。 注意事项 用户进入“仓库建模”配置数据时必须选择工厂。

查看更多 →

在“工厂建模”页面的“工厂结构定义”页签，单击待编辑的车间记录“操作”列的“编辑”，根据实际情况修改车间名称、车间描述、车间类别等参数信息。 删除车间 在“工厂建模”页面的“工厂结构定义”页签，单击待删除的车间记录“操作”列的“删除”，删除车间。 查询车间 在“工厂建模”页面的“工厂结构定义”页签：

查看更多 →

维度建模 新建维度 管理维度表 新建事实表 父主题： 模型设计

查看更多 →

Hudi进行DWI层建模的目的是在ETL映射中需要使用，即，将SDI层的某个表映射至DWI层。 ETL映射 根据业务场景需要，可将数据从源端数据中进行移动和转换到指定的目标数据表中。如，本实践中需要将SDI层的门店表映射至DWI层的门店表。 图26 新建ETL映射 表2 ETL映射参数说明

查看更多 →

目标表设计：即数据集市结果表设计，根据数据应用的需求进行数据表设计 数据源分析：主要分析数据仓库的数据如何满足集市的需要，即确定需要数据仓库的那些表数据，如果数据仓库没有，则需要数据仓库进行数据补充 数据仓库表与目标表字段进行映射，确定加工规则 验证数据并调整加工规则 实施步骤 根据设计好的目标表，创建DM层物理表

查看更多 →

资产建模 简介 模型管理 资产管理 分析任务定义

查看更多 →

过程中，能够准确的理解各模型之间的关系并高效准确的设计 ETL 任务。 图9 可视化设计 逆向工程 支持通过数据库导入的方式，快速将外部数据库中的表逆向为逻辑模型，导入到 DataFacts平台中，帮助用户在数据同步、ETL 任务迁移等场景中，复用已有的逻辑模型，节省重复建设成本。

查看更多 →