se读写数据的效率。越大的block块，配合压缩算法，压缩的效率就越好；但是由于HBase的读取数据是以block块为单位的，所以越大的block块，对于随机读的情况，性能可能会比较差。 如果要提升写入的性能，一般扩大到128KB或者256KB，可以提升写数据的效率，也不会影响太大的随机读性能。单位：字节

查看更多 →

缺乏技术元数据与业务元数据的关联，数据读不懂。 缺乏数据的质量管控和评估手段，数据不可信。 数据运营的挑战 数据运营效率低，业务环境的快速变化带来大量多样化的数据分析报表需求，因为缺乏高效的数据运营工具平台，数据开发周期长、效率低，不能满足业务运营决策人员的诉求。 数据运营成本高，数据未服务化，导致数据复制多、

查看更多 →

00之间的值。 200 hfile.block.cache.size HBase缓存区大小，主要影响查询性能。根据查询模式以及查询记录分布情况来决定缓存区的大小。如果采用随机查询使得缓存区的命中率较低，可以适当降低缓存区大小。 当offheap关闭时，默认值为0.25。当offheap开启时，默认值是0

查看更多 →

00之间的值。 200 hfile.block.cache.size HBase缓存区大小，主要影响查询性能。根据查询模式以及查询记录分布情况来决定缓存区的大小。如果采用随机查询使得缓存区的命中率较低，可以适当降低缓存区大小。 当offheap关闭时，默认值为0.25。当offheap开启时，默认值是0

查看更多 →

配置Hudi单表并发控制 默认情况下Hudi不支持单表并发写和Compaction操作，在使用Flink、Spark引擎进行数据写入以及使用Spark引擎进行Compaction操作时，会先尝试获取锁对应的锁（集群内Zookeeper提供分布式锁服务，并自动配置生效），如果获取失

查看更多 →

配置Hudi单表并发控制 默认情况下Hudi不支持单表并发写和Compaction操作，在使用Flink、Spark引擎进行数据写入以及使用Spark引擎进行Compaction操作时，会先尝试获取锁对应的锁（集群内Zookeeper提供分布式锁服务，并自动配置生效），如果获取失

查看更多 →

创建 数据仓库 GaussDB (DWS) 参见“创建集群”章节创建GaussDB(DWS)数据仓库。创建成功后，记录集群的内网IP。 为确保E CS 与GaussDB(DWS)网络互通，GaussDB(DWS)数据仓库需要与ECS在同一个区域，同一个虚拟私有云和子网下。 表1 DWS规格

查看更多 →

数据仓库错误码 SQL标准错误码说明 第三方库错误码说明 GAUSS-00001 -- GAUSS-00100 GAUSS-00101 -- GAUSS-00200 GAUSS-00201 -- GAUSS-00300 GAUSS-00301 -- GAUSS-00400 GAUSS-00401

查看更多 →

数据仓库服务 DWS DWS集群启用KMS加密 DWS集群启用日志转储 DWS集群启用自动快照 DWS集群启用SSL加密连接 DWS集群未绑定公网IP 父主题： 系统内置预设策略

查看更多 →

认第一列作为分布列，可能会有数据倾斜风险。 因此，在单表或整库导入到DWS/ FusionInsight LibrA时，建议您在此处手动选择分布列，如果您没有选择， CDM 会自动选择一个分布列。关于分布列的更多信息，请参见数据仓库服务。 DWS主键或表只有一个字段时，要求字段类型必须

查看更多 →

认第一列作为分布列，可能会有数据倾斜风险。 因此，在单表或整库导入到DWS/FusionInsight LibrA时，建议您在此处手动选择分布列，如果您没有选择，CDM会自动选择一个分布列。关于分布列的更多信息，请参见数据仓库服务。 DWS主键或表只有一个字段时，要求字段类型必须

查看更多 →

提升HBase BulkLoad工具批量加载效率 操作场景 批量加载功能采用了MapReduce jobs直接生成符合HBase内部数据格式的文件，然后把生成的StoreFiles文件加载到正在运行的集群。使用批量加载相比直接使用HBase的API会节约更多的CPU和网络资源。

查看更多 →

提升HBase BulkLoad工具批量加载效率 操作场景 批量加载功能采用了MapReduce jobs直接生成符合HBase内部数据格式的文件，然后把生成的StoreFiles文件加载到正在运行的集群。使用批量加载相比直接使用HBase的API会节约更多的CPU和网络资源。

查看更多 →

表数据膨胀导致SQL查询慢，用户前台页面数据加载不出 集群报错内存溢出 带自定义函数的语句不下推 列存表更新失败或多次更新后出现表膨胀 列存表多次插入后出现表膨胀 往GaussDB(DWS)写数据慢，客户端数据会有积压 分析查询效率异常降低的问题 未收集统计信息导致查询性能差 执行计划

查看更多 →

按照传统的定义，元数据（Metadata）是关于数据的数据。元数据打通了源数据、数据仓库、数据应用，记录了数据从产生到消费的全过程。元数据主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态及ETL的任务运行状态。在数据仓库系统中，元数据可以帮助数据仓库管理员和开发人员非常方便地找到其所关心的数据

查看更多 →

平滑演进。 数据仓库服务DWS GaussDB(DWS)是企业级的大规模并行处理关系型数据库。其采用MPP（Massive Parallel Processing）架构，支持行存储与列存储，提供PB（Petabyte，2的50次方字节）级别数据量的处理能力。数据仓库服务（Gaus

查看更多 →

不支持新建表和视图操作。 SQL查询 √ SQL执行记录 √ 角色管理 √ 与数据仓库服务GaussDB(DWS)的关系 数据管理服务支持数据仓库服务GaussDB(DWS)实例的管理。 通过数据管理服务连接目标数据仓库时，需要使用到目标数据仓库的用户名和密码。 支持GaussDB(DWS)

查看更多 →

GaussDB单表支持的最大列数? 答：1600，但是随字段类型不同会有变化，建表时不校验字段类型，存入数据时校验，例如bigint类型的字段，每个字段存入8字节数据，1600个字段，需要存入12800个字节，超过一个页面8K，插入时会报错。 父主题： FAQ

查看更多 →

实时诊断”。 选择“容量预估”页签，可以查看当前实例的表智能诊断结果。 图1 表诊断结果 单击自动诊断后的，在弹框中，设置近一天单表空间增长的诊断阈值，取值范围为1~100000000，单位为MB。 图2 自定义诊断阈值 单击“确定”。如果近一天内单表的大小超过该阈值系统会自动筛选出该

查看更多 →

操作指导 数据仓库服务 GaussDB(DWS) 快照管理 04:01 数据仓库服务快照管理 数据仓库服务 GaussDB(DWS) 集群管理 02:27 数据仓库服务集群管理 数据仓库服务 GaussDB(DWS) 快速入门 03:19 数据仓库服务快速入门 数据仓库服务 GaussDB(DWS)

查看更多 →

什么是数据仓库服务 数据仓库服务GaussDB(DWS)是一种基于华为云基础架构和平台的在线数据分析处理数据库，提供即开即用、可扩展且完全托管的分析型数据库服务，兼容ANSI/ISO标准的SQL92、SQL99和SQL 2003语法，同时兼容PostgreSQL/Oracle/T

查看更多 →