CDM 迁移数据到DWS时如何选取分布列？ 在使用CDM迁移数据到 数据仓库 服务（DWS）或者 FusionInsight LibrA，且CDM在DWS端自动创建一个新表时，在创建作业的字段映射界面，需要选择分布列，如图1所示。 图1 选取分布列 由于分布列的选取，对于DWS/FusionInsight

查看更多 →

支持基于作业优先级动态调整作业的使用资源。 仅支持YARN集群。 上下游数据连接 除了开源connector之外，还提供开箱即用的connector，包括数据库（RDS、 GaussDB ）、消息队列（DMS）、数据仓库（DWS）、对象存储（OBS） 相比开源connector有较多易用性和稳定性提升。

查看更多 →

DWS Connector概述 数据仓库服务（Data Warehouse Service，简称DWS）是一种基于基础架构和平台的在线数据处理数据库，为用户提供海量数据挖掘和分析服务。 DLI 将Flink作业从数据仓库服务（DWS）中读取数据。DWS数据库内核兼容PostgreSQ

查看更多 →

DWS集群VPC检查 规则详情 表1 规则详情 参数 说明 规则名称 dws-clusters-in-vpc 规则展示名 DWS集群VPC检查 规则描述 DWS集群绑定的VPC不在对应VPC列表，视为“不合规”。 标签 dws 规则触发方式 配置变更 规则评估的资源类型 dws.clusters

查看更多 →

日志转储至DWS 数据仓库服务GaussDB(DWS) 是一种基于华为云基础架构和平台的在线数据处理数据库，提供即开即用、可扩展且完全托管的分析型数据库服务。转储至数据仓库服务GaussDB(DWS) ，可以将日志中的结构化字段转储到DWS数据库表中，您可以根据业务场景选择是否使用DWS进行日志转储。

查看更多 →

助企业轻松构建数据应用。 弹性云服务器 弹性云服务器（Elastic Cloud Server，E CS ）是由CPU、内存、操作系统、云硬盘组成的基础的计算组件。弹性云服务器创建成功后，您就可以像使用自己的本地PC或物理服务器一样，在云上使用弹性云服务器。 弹性云服务器的开通是自助

查看更多 →

GaussDB(DWS)让您能够轻松完成从项目概念到生产部署的整个过程。通过使用GaussDB(DWS)管理控制台，您不需要安装数据仓库软件，也不需要部署数据仓库服务器，就可以在几分钟之内获得高性能、高可靠的企业级数据仓库集群。 您只需单击几下鼠标，就可以轻松完成应用程序与数据仓库的连接、

查看更多 →

Kafka实时入库到GaussDB(DWS) 通过数据湖探索服务 DLI Flink作业将Kafka的消费数据实时同步至GaussDB(DWS)数据仓库，实现Kafka实时入库到GaussDB(DWS)的过程。 了解DLI请参见数据湖产品介绍 。 了解Kafka请参见分布式消息服务Kafka产品介绍。

查看更多 →

interface）方式管理GaussDB(DWS)集群。 集群部署时，如果单个节点故障，访问GaussDB(DWS)时会自动屏蔽异常节点，但会影响集群性能。 访问集群数据库 GaussDB(DWS)支持如下方式访问集群数据库： GaussDB(DWS)客户端方式 用户使用GaussDB(DWS)客户端访问集

查看更多 →

，全方位了解数据仓库发展趋势与典型应用场景。 培训内容 表1 华为云数据仓库高级工程师培训 培训内容 说明 DWS数据仓库概述 OLAP数据库概述 DWS产品架构 DWS相关案例 集群HA SQL基础语法 数据字典 数据类型 函数和操作符 语法分类 查询语句 DWS相关服务介绍 EIP

查看更多 →

rk作业访问其他数据存储服务并导入、查询、分析处理其中的数据，目前支持的DLI跨源访问服务有： 表格存储 服务CloudTable， 云搜索 服务 CSS ，分布式缓存服务DCS，文档数据库服务DDS，数据仓库服务GaussDB（DWS），MapReduce服务 MRS ，云数据库RDS等。使用DLI的跨源能力，需要先创建跨源连接。

查看更多 →

数据仓库自定义属性 获取数据仓库自定义属性列表 父主题： API

查看更多 →

掉一些标准数据库的事务或者数据增删改的功能或者性能。因此，数据仓库和数据库的使用场景还是有所不同的。事务型数据库专注于事务处理（企业的业务运营），而数据仓库更擅长于复杂的数据分析。两者各司其职，互不干扰。简单一句话可以理解为，数据库主要负责数据更新，数据仓库主要负责数据分析。 父主题：

查看更多 →

使用gsql连接DWS 使用gsql连接DWS集群 进入到ECS的/opt目录下，并执行环境变量。 1 2 cd /opt source gsql_env.sh 执行以下命令连接GaussDB(DWS)数据库。其中，<DWS的内网IP>、<用户dbadmin密码>从创建数据仓库GaussDB(DWS)获取。

查看更多 →

DWS结果表 功能描述 DLI将Flink作业的输出数据输出到数据仓库服务（DWS）中。DWS数据库内核兼容PostgreSQL，PostgreSQL数据库可存储更加复杂类型的数据，支持空间信息服务、多版本并发控制（MVCC）、高并发，适用场景包括位置应用、金融保险、互联网电商等。

查看更多 →

请参见OBS价格详情中的“价格详情”。 数据仓库服务磁盘存储 热数据存储容量单价*热数据存储容量*节点数量 *数据副本数量*计费时长 请参见GaussDB(DWS)价格详情中的“热数据存储资源”。 冷分区数据存储 冷分区数据存储容量单价*冷分区数据存储容量*节点数量 *数据副本数量*计费时长 冷分区数据采用OB

查看更多 →

Balance，ELB）负责其计费。 数据库加密密钥（可选） 包年/包月集群搭配“加密数据库”的功能时，密钥的计费模式同为包年/包月，由数据加密服务（ Data Encryption Workshop，DEW）负责其计费。 假设您计划创建一个GaussDB(DWS)集群，热数据存储选择每节点50G

查看更多 →

不同CDM集群支持的数据源程度不一样，以实际为准。 表/文件同步支持的数据源类型 表/文件同步可以实现表或文件级别的数据同步。 支持单表同步的数据源（已支持的数据源即可作为源端，又可作为目的端组成不同链路）如下所示： 数据仓库：DWS、DLI Hadoop：MRS Hive、Apache

查看更多 →

DWS工具 客户端工具 数据库监控工具 三方工具兼容

查看更多 →

对接DWS scala样例代码 pyspark样例代码 java样例代码 父主题： 使用Spark作业跨源访问数据源

查看更多 →

DWS SQL 功能 通过DWS SQL节点传递SQL语句到DWS中执行。 DWS SQL算子的具体使用教程，请参见开发一个DWS SQL脚本作业。 背景信息 该节点方便用户在数据开发模块的批处理作业和实时处理作业中执行DWS相关语句，可以使用参数变量为用户的数据仓库进行增量导入，分区处理等操作。

查看更多 →