支持的数据源 实时集成作业支持的数据源如表1所示。 表1 实时集成作业支持的数据源 数据源分类 源端数据源 对应的目的端数据源 相关文档 关系型数据 MySQL Hadoop： MRS Hudi MySQL同步到MRS Hudi 消息系统：DMS Kafka MySQL同步到DMS

查看更多 →

概述 DLI 支持原生Spark的DataSource能力，并在其基础上进行了扩展，能够通过SQL语句或者Spark作业访问其他数据存储服务并导入、查询、分析处理其中的数据，目前支持的DLI跨源访问服务有： 表格存储服务 CloudTable， 云搜索服务 CSS，分布式缓存服务D CS ，文

查看更多 →

OLAP为使用多维结构为分析提供对数据的快速访问的技术，OLAP 的源数据通常存储在关系数据库的 数据仓库 中。OLAP是数据仓库系统的主要应用，支持复杂的分析操作，侧重决策支持，并且提供直观易懂的查询结果。 OLTP也称为面向交易的处理系统，其基本特征是顾客的原始数据可以立即传送到计算中心

查看更多 →

当前国内企业客户正在经历数字化转型与IT架构变更的发展阶段，收到国外经济、政治、商贸等环境影响，需要选择更加符合自身稳健发展的解决方案，其中面向数据库底座的专业技术服务能够有效的支撑行业客户在进行架构创新与迁移过程面临的各种问题。本解决方案致力于面向客户提供专业、可靠、长期的专业技术支持。 从下述纬度进一步说明：

查看更多 →

数据在 GaussDB (DWS)中是否安全？ 可以修改GaussDB(DWS)集群的安全组吗？ 数据库、数据仓库、 数据湖 、湖仓一体分别是什么？ GaussDB(DWS)的脏页是如何产生的？ 如何使用VPC共享来处理GaussDB(DWS)资源？

查看更多 →

否 WarehouseDataFilters object 当data_id字段的取值为数据仓库id时，本结构体配置数据仓库输入数据筛选条件 warehouse_id 否 String 输出到数据仓库的id。当算子类型为数据标记、数据集、数据图表和回放仿真时必填 envs 否 Array

查看更多 →

GaussDB(DWS)支持行列混合存储，可以同时为用户提供更优的数据压缩比（列存）、更好的索引性能（列存）、更好的点更新和点查询（行存）性能。 数据加载快 GaussDB(DWS)提供了GDS极速并行大规模数据加载工具。 列存下的数据压缩 对于非活跃的早期数据可以通过压缩来减少空间占用，降低采购和运维成本。

查看更多 →

（推荐使用）DWS服务自研的DWS Connector：更关注于直接与DWS的性能与交互，用户能够更加灵活便捷的与DWS进行数据的读写操作。 您可以通过自定义函数（UDF）的方式使用DWS自研的DWS Connector。自定义函数操作请参考自定义函数。 DWS-Connector的使用方法请参

查看更多 →

primary_key = "c_timeminute" ); 注意事项 stream_id所定义的流格式需和数据库中的表格式一致。 示例 将流audi_cheaper_than_30w的数据输出到数据库test的audi_cheaper_than_30w表下。 1 2 3 4 5 6

查看更多 →

primary_key = "c_timeminute" ); 注意事项 stream_id所定义的流格式需和数据库中的表格式一致。 示例 将流audi_cheaper_than_30w的数据输出到数据库test的audi_cheaper_than_30w表下。 1 2 3 4 5 6

查看更多 →

本实验通过部署GDS 服务器 ，使用GDS导入导出的并发能力，实现双DWS集群之间1500万行数据分钟级迁移。 2h 安全管理 权限管理 通过实验创建不同用户，不同Schema，基于权限管理实现数据的隔离和互访，了解用户、角色的关系，了解grant的基本用法，了解基于角色的权限管理(RBAC)。 1.5h

查看更多 →

计费FAQ 如何免费试用数据仓库服务？ 免费试用GaussDB(DWS) ，到期后为什么会被扣费？ 领取免费数据仓库服务后，为什么看不到集群？ 按需计费是否可通过关机暂停使用来节省费用？ 创建集群时，为什么购买按钮一直处于灰色，无法提交？ 集群被冻结了，导致无法使用，如何解冻？

查看更多 →

GaussDB(DWS)可以存储多少业务数据？ 数据仓库集群每个节点默认能够支持1.49TB、2.98TB、4.47TB、160GB、1.68TB、13.41TB六种规格的存储容量，一个集群支持的节点数范围为3～256，集群总的存储容量随集群规模等比例扩充。 为增强可靠性，每个节点都有一个副本，副本会占用一半的存储空间，选择容量时副本容量会自动翻倍存储。

查看更多 →

Service，简称DWS）是一种基于基础架构和平台的在线数据处理数据库，为用户提供海量数据挖掘和分析服务。DWS的更多信息，请参见《数据仓库服务管理指南》。 注意事项 通过OBS转储支持两种中间文件方式： ORC： ORC格式不支持Array数据类型，如果使用ORC格式，需先在DW

查看更多 →

Service，简称DWS）是一种基于基础架构和平台的在线数据处理数据库，为用户提供海量数据挖掘和分析服务。DWS的更多信息，请参见《数据仓库服务管理指南》。 注意事项 通过OBS转储支持两种中间文件方式： ORC： ORC格式不支持Array数据类型，如果使用ORC格式，需先在DW

查看更多 →

以GaussDB(DWS)的SQL作为上层应用的统一入口，应用开发人员使用熟悉的SQL语言即可访问所有数据。 实时交互分析 针对即时的分析需求，分析人员可实时从大数据平台上获取信息。 弹性伸缩 增加节点，即可扩展系统的数据存储能力和查询分析的性能，可支持PB级数据的存储和计算。 增强型ETL和实时BI分析 数据仓

查看更多 →

概览 本章节汇总了基于Migration实时数据集成服务常见应用场景的操作指导，每个实践我们提供了详细的方案描述和操作指导，用于指导您快速实现数据库迁移和同步。 表1 Migration基础实践一览表 数据源分类 源端数据源 对应目的端数据源 相关文档 关系型数据 MySQL Hadoop：MRS

查看更多 →

修订记录 发布日期 修订记录 2023-1-31 新增镜像仓库、镜像版本、数据集、数据集版本、数据仓库、数据仓库自定义属性、集群信息管理、数据总览、数据包、数据导入、数据回放、作业管理、算子管理、作业队列、内部作业、数据场景、标签管理相关操作接口。 新增Common-SDK错误码

查看更多 →

可以通过快照创建新的云硬盘，这样云硬盘在初始状态就具有快照中的数据。 创建快照可以快速保存指定时刻云硬盘的数据，实现数据容灾： 当数据丢失时，可通过快照将数据完整的恢复到快照时间点。 通过快照创建新的云硬盘，新的云硬盘具有快照中的数据。 有关快照的更多内容，请参见云硬盘快照。 父主题：

查看更多 →

在企业经营分析中，把规模庞大的业务数据导入到云数据仓库ClickHouse，对数亿记录或更大规模的大宽表和数百维度的查询，都能在亚秒级内响应，得到查询结果。让客户随时进行个性化统计和不间断的分析，辅助商业决策。 访客来源分析展示。 通过批量离线计算对用户访问日志中的用户行为进行关联，生成

查看更多 →

无搬迁上云经验，故企业上云、架构升级及数仓搬迁困难重重。华为云GaussDB(DWS)推出数据仓库上云与实施服务，提供专业的数仓搬迁团队和一站式可配置的搬迁工具，协助客户平滑、高效、稳定的实现数仓搬迁。 父主题： 关于服务咨询

查看更多 →