概述 数据集成围绕 GaussDB (DWS)，提供了简单易用的迁移能力及多种数据源到DWS的集成能力，降低用户数据源迁移和集成的复杂性，是一种高效易用的数据集成服务。目前数据源支持从Kafka、MySQL、Oracle和IoT源端迁移至GaussDB(DWS)目的端。 该特性仅8.2

查看更多 →

HDFS是Hadoop的分布式文件系统（Hadoop Distributed File System），实现大规模数据可靠的分布式读写。HDFS针对的使用场景是数据读写具有“一次写，多次读”的特征，而数据“写”操作是顺序写，也就是在文件创建时的写入或者在现有文件之后的添加操作。HDFS

查看更多 →

基于对企业业务流程及业务过程调研，对需要构建的事实模型进行汇总。其中，业务流程包含多个业务过程。 图5 业务流程及过程管理1 图6 业务流程及过程管理2 总线矩阵 完成业务实体、业务流程、业务过程的构建后，平台会形成由待填充的事实逻辑模型和维度逻辑模型构成的总线矩阵。模型设计人员可以方便的按照矩阵的指引，完成维度表、事实表等逻辑模型设计。

查看更多 →

服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 Trigger condition 系统当前指标取值满足自定义的告警设置条件。 对系统的影响 Hive 数据仓库 空间写满后系统将无法正常写入数据，可能导致部分数据丢失。 可能原因 Hive使用HDFS容量上限过小。

查看更多 →

咨询与规划服务的优势？ 强大的数据处理能力：华为云数据仓库咨询与治理服务拥有强大的数据处理能力，能够为企业提供定制化的数据分析和挖掘，帮助企业发现隐藏在数据中的机会和问题。 灵活的数据处理架构：华为云数据仓库咨询与治理服务采用灵活的数据处理架构，能够根据企业的需求和情况，快速搭建

查看更多 →

数据资产模型是解决方案信息架构共享，包含方案的主题设计、逻辑模型设计、物理模型设计、ETL映射、业务指标设计等。如何发布数据资产模型参考归档发布资产。 查找数据资产模型 图1 查找数据资产模型 图2 数据资产模型详情 引用数据资产模型 支持将发布的数据资产模型引用到指定方案下，基于引用的模型二次编辑，快速完成信息架构设计。

查看更多 →

咨询与规划服务可以提供哪些服务？ 数据仓库咨询服务-资深咨询专家 数据仓库咨询服务-高级咨询专家 数据仓库咨询服务-资深顾问 父主题： 关于服务咨询

查看更多 →

文件迁移所产生的血缘。 ETL Job 支持 DLI 、OBS、MySQL以及DWS之间的ETL任务产生的血缘。 手动配置血缘 在 DataArts Studio 数据开发的作业中，您可以在数据开发作业节点中，自定义血缘关系的输入表和输出表。注意，当手动配置血缘时，此节点的自动血缘解析将不生效。

查看更多 →

文件迁移所产生的血缘。 ETL Job 支持DLI、OBS、MySQL以及DWS之间的ETL任务产生的血缘。 手动配置血缘 在DataArts Studio数据开发的作业中，您可以在数据开发作业节点中，自定义血缘关系的输入表和输出表。注意，当手动配置血缘时，此节点的自动血缘解析将不生效。

查看更多 →

Storm是一个分布式的、可靠的、容错的数据流处理系统。它会把工作任务委托给不同类型的组件，每个组件负责处理一项简单特定的任务。Storm的目标是提供对大数据流的实时处理，可以可靠地处理无限的数据流。 Storm有很多适用的场景：实时分析、在线机器学习、持续计算和分布式ETL等，易扩展、支

查看更多 →

Server，简称E CS ）作为集群的节点，每个 弹性云服务器 是集群中的一个节点。 与 裸金属服务器 的关系 数据仓库服务使用裸金属 服务器 （Bare Metal Server，简称BMS）作为集群的节点，每个裸金属服务器是集群中的一个节点。 与虚拟私有云的关系 数据仓库服务使用虚拟私有云（Virtual

查看更多 →

BTEQ工具命令 GaussDB(DWS)提供了一系列gsql元命令，可以等价替换常用的BTEQ工具命令。常用BTEQ命令的转换行为如下： .QUIT | .EXIT | .RETURN 元命令\q [value]支持退出gsql程序，且可以通过value值指定退出码。.QUIT、

查看更多 →

Kafka - 上表中非云服务的数据源，例如MySQL，既可以支持用户本地数据中心自建的MySQL，也可以是用户在ECS上自建的MySQL，还可以是第三方云的MySQL服务。 整库迁移支持的数据源类型 整库迁移适用于将本地数据中心或在ECS上自建的数据库，同步到云上的数据库服务或大数据服务

查看更多 →

的数据源类型。 本文介绍2.9.2.200版本 CDM 集群所支持的数据源。因各版本集群支持的数据源有所差异，其他版本支持的数据源仅做参考。 表/文件迁移支持的数据源类型 表/文件迁移可以实现表或文件级别的数据迁移。 表/文件迁移时支持的数据源如表1所示。 表1 表/文件迁移支持的数据源

查看更多 →

的数据源类型。 本文介绍2.9.3.300版本CDM集群所支持的数据源。因各版本集群支持的数据源有所差异，其他版本支持的数据源仅做参考。 表/文件迁移支持的数据源类型 表/文件迁移可以实现表或文件级别的数据迁移。 表/文件迁移时支持的数据源如表1所示。 表1 表/文件迁移支持的数据源

查看更多 →

的数据源类型。 本文介绍2.9.3.300版本CDM集群所支持的数据源。因各版本集群支持的数据源有所差异，其他版本支持的数据源仅做参考。 表/文件迁移支持的数据源类型 表/文件迁移可以实现表或文件级别的数据迁移。 表/文件迁移时支持的数据源如表1所示。 表1 表/文件迁移支持的数据源

查看更多 →

HetuEngine MRS Impala SQL MRS Flink Job MRS MapReduce CSS Shell RDS SQL ETL Job Python DORIS SQL GBase SQL ModelArts Train OCR Create OBS Delete

查看更多 →

支持用户通过自定义 SQL 校验、正则表达式校验等自定义的方式进行规则的扩展，实现如值域校验、精度校验等校验方式，形成规则模板以便重复使用。 图2 自定义质量规则 质量加权评分 支持用户自定义质量评分指标，为不同的质量规则关联指标并分配计分权重，从而根据企业的数据质量评估体系，有层次有重点地对数据质量进行评分。

查看更多 →

Storm是一个分布式的、可靠的、容错的数据流处理系统。它会把工作任务委托给不同类型的组件，每个组件负责处理一项简单特定的任务。Storm的目标是提供对大数据流的实时处理，可以可靠地处理无限的数据流。 Storm有很多适用的场景：实时分析、在线机器学习、持续计算和分布式ETL等，易扩展、支

查看更多 →

Spark支持两种方式的序列化 ： Java原生序列化JavaSerializer Kryo序列化KryoSerializer 序列化对于Spark应用的性能来说，具有很大的影响。在特定的数据格式的情况下，KryoSerializer的性能可以达到JavaSerializer的10倍以上，

查看更多 →

Spark支持两种方式的序列化 ： Java原生序列化JavaSerializer Kryo序列化KryoSerializer 序列化对于Spark应用的性能来说，具有很大的影响。在特定的数据格式的情况下，KryoSerializer的性能可以达到JavaSerializer的10倍以上，

查看更多 →