数据下载的消费模式 同Kafka类似，当前dis kafka adapter支持三种消费模式。 assign模式 由用户手动指定consumer实例消费哪些具体分区，此时不会拥有group management机制，也就是当group内消费者数量变化或者通道扩缩容的时候不会有重新分配分区的行为发生。代码样例如下所示：

查看更多 →

数据下载的消费模式 同Kafka类似，当前dis kafka adapter支持三种消费模式。 assign模式 由用户手动指定consumer实例消费哪些具体分区，此时不会拥有group management机制，也就是当group内消费者数量变化或者通道扩缩容的时候不会有重新分配分区的行为发生。代码样例如下所示：

查看更多 →

数据库模式迁移 功能 runDSC.sh和runDSC.bat分别用于将Teradata、MySQL的schema和query迁移到 GaussDB (DWS)上。 迁移参数指导 Teradata SQL迁移 Teradata Perl迁移 MySQL SQL迁移 Oracle SQL迁移

查看更多 →

切换到“自定义”面板，可以单击“新增数据源”（或在“专属集群”页面单击指定集群操作列的“登录”按钮）。 集群：选择需要连接的集群。 数据库：填写数据库名称，如果是新创建集群可填写DWS集群默认数据库gaussdb，也可以根据需要进行编辑切换其他数据库。 数据源名称：设置数据源名称。 用户名：设置用户名称。 密码：设

查看更多 →

DLI 将Flink作业的输出数据输出到 数据仓库 服务（DWS）中。DWS数据库内核兼容PostgreSQL，PostgreSQL数据库可存储更加复杂类型的数据，支持空间信息服务、多版本并发控制（MVCC）、高并发，适用场景包括位置应用、金融保险、互联网电商等。 数据仓库服务（Data Warehouse

查看更多 →

产品定位 数据仓库服务（GaussDB(DWS)，以下简称DWS）是一种基于公有云基础架构和平台的在线数据处理数据库，提供即开即用、可扩展且完全托管的分析型数据库服务。DWS是基于华为融合数据仓库GaussDB产品的云原生服务，兼容标准ANSI SQL 99和SQL 2003，同

查看更多 →

高性能 云化分布式架构 DWS采用全并行的MPP架构数据库，业务数据被分散存储在多个节点上，数据分析任务被推送到数据所在位置就近执行，并行地完成大规模的数据处理工作，实现对数据处理的快速响应。 查询高性能，万亿数据秒级响应 DWS后台通过算子多线程并行执行、向量化计算引擎实现指

查看更多 →

数据复制服务是否采用了并发技术 并发技术是提升性能的关键技术，DRS在多个环节采用了并发技术，总体可以分为两个大类并发技术：读写类并发和线程类并发。 读写类并发 为了提升全量阶段历史数据的搬迁，同时对抗网络的不稳定性，DRS实现了数据行级并发抽取效果，从而使得历史数据搬迁速度最大

查看更多 →

可以在哪里导入数据 在数据管理页面，可将数据加工所需的原始遥感卫星影像文件、倾斜摄影影像（航空飞机影像、无人机影像）和矢量文件导入到KooMap存储空间中。具体导入步骤请参见导入数据。 父主题： 数据传输

查看更多 →

用户网络是否与互联网可以正常连通。 用户网络防火墙策略是否限制了访问。 用户网络是否需要通过代理才能访问互联网。 联系服务人员 如果无法确定原因并解决问题，请提交工单反馈问题。您可以登录管理控制台，在右上方单击“工单>新建工单”填写并提交工单。 父主题： 数据库连接

查看更多 →

对系统的影响 Hive默认数据仓库的权限被修改，会影响当前用户，用户组，其他用户在默认数据仓库中创建库、创建表等操作的操作权限范围。会扩大或缩小权限。 可能原因 Hive定时查看默认数据仓库的状态，发现Hive默认数据仓库权限发生更改。 处理步骤 检查Hive默认数据仓库权限情况。 以ro

查看更多 →

主实例和备实例之间的数据同步方法，支持异步（默认）和同步两种： 对数据库在线时间要求较高的业务，建议选择“异步”模式。 对数据一致性要求极高且能容忍写入操作被阻塞的业务，建议选择“同步”模式。 主实例和只读实例之间支持异步提交模式，且不可以修改。 针对Microsoft SQL Server引擎： 主实例和备实例之间支持同步提交模式，且不可以修改。

查看更多 →

无法成功创建数据仓库集群时怎么处理？ 检查原因 检查是否用户已经没有配额创建新的数据仓库集群。 联系服务人员 如果无法确定原因并解决问题，请提交工单反馈问题。您可以登录管理控制台，在右上方单击“工单>新建工单”填写并提交工单。 父主题： 集群管理

查看更多 →

DLI将Flink作业的输出数据输出到数据仓库服务（DWS）中。DWS数据库内核兼容PostgreSQL，PostgreSQL数据库可存储更加复杂类型的数据，支持空间信息服务、多版本并发控制（MVCC）、高并发，适用场景包括位置应用、金融保险、互联网电商等。 数据仓库服务（Data Warehouse

查看更多 →

数据湖就是在这种背景下产生的。数据湖是一个集中存储各类结构化和非结构化数据的大型数据仓库，它可以存储来自多个数据源、多种数据类型的原始数据，数据无需经过结构化处理，就可以进行存取、处理、分析和传输。数据湖能帮助企业快速完成异构数据源的联邦分析、挖掘和探索数据价值。 数据湖的本质，是由“数据存储架构+数据处理工具”组成的解决方案。

查看更多 →

如何采用Java命令提交Spark应用 问题 除了spark-submit命令提交应用外，如何采用Java命令提交Spark应用？ 回答 您可以通过org.apache.spark.launcher.SparkLauncher类采用java命令方式提交Spark应用。详细步骤如下：

查看更多 →

如何采用Java命令提交Spark应用 问题 除了spark-submit命令提交应用外，如何采用Java命令提交Spark应用？ 回答 您可以通过org.apache.spark.launcher.SparkLauncher类采用java命令方式提交Spark应用。详细步骤如下：

查看更多 →

湖仓一体 无缝访问数据湖 对接Hive Metastore元数据管理，直接访问数据湖的数据表定义，无需用户创建外表，只需创建external schema即可。 支持主要数据格式：ORC，Parquet。 融合查询 混合查询数据湖和仓内的任意数据。 查询一步到位输出到仓内/数据湖，无需额外数据中转拷贝。

查看更多 →

支持的数据源（2.9.3.300） 数据集成有两种迁移方式，支持的数据源有所不同： 表/文件迁移：适用于数据入湖和数据上云场景下，表或文件级别的数据迁移，请参见表/文件迁移支持的数据源类型。 整库迁移：适用于数据入湖和数据上云场景下，离线或自建数据库整体迁移场景，请参见整库迁移支持的数据源类型。

查看更多 →

，并输入2中复制的集群名称，单击图标即可搜索该资源的账单。 图4 查询资源账单 可以看到DWS集群收取了数据仓库服务磁盘存储、数据仓库节点和数据仓库集群三类资源的费用，这取决于DWS的计费项和计费模式，具体请参见1 计费概述。 关于查询账单的详细参数介绍请参见流水与明细账单。 场景示例：核对资源用量是否与实际相符

查看更多 →

秒级计费，按小时结算。 适用计费项 数据仓库节点、快照存储空间、数据仓库服务磁盘存储、公网IP及带宽（可选）、数据库加密密钥（可选） OBS热数据存储 数据仓库节点、快照存储空间、数据仓库服务磁盘存储、公网IP及带宽（可选）、数据库加密密钥（可选） 变更计费模式 支持变更为按需计费模式。 但包年/包月

查看更多 →