中软国际数据治理专业服务解决方案实践

安装使用集群外客户端时，连接集群端口失败 问题 安装集群外客户端或使用集群外客户端时，有时会出现连接Spark任务端口失败的问题。 异常信息：Failed to bind SparkUi Cannot assign requested address: Service ‘sparkDriver’

查看更多 →

specified. Using %s by default. 解决方案：请使用“DISTRIBUTE BY”子句指定合适的数据分布列。 level： NOTICE 父主题： 行列存

查看更多 →

列存 GS_102040184 错误码： CU partial write. 解决方案：CU文件无法进行页面对齐，请检查可用磁盘空间。 level： ERROR GS_102040186 错误码： could not extend file %s. 解决方案：请检查可用磁盘空间。

查看更多 →

表数据膨胀导致SQL查询慢，用户前台页面数据加载不出 集群报错内存溢出 带自定义函数的语句不下推 列存表更新失败或多次更新后出现表膨胀 列存表多次插入后出现表膨胀 往 GaussDB (DWS)写数据慢，客户端数据会有积压 分析查询效率异常降低的问题 未收集统计信息导致查询性能差 执行计划中有NestLoop导致SQL语句执行慢

查看更多 →

列存表支持的数据类型 列存表支持的数据类型如表1所示。 表1 列存表支持的数据类型 类别 数据类型 长度 是否支持 Numeric Types smallint 2 支持 integer 4 支持 bigint 8 支持 decimal -1 支持 numeric -1 支持 real

查看更多 →

列存表支持的数据类型 列存表支持的数据类型如表1所示。 表1 列存表支持的数据类型 类别 数据类型 长度 是否支持 Numeric Types smallint 2 支持 integer 4 支持 bigint 8 支持 decimal -1 支持 numeric -1 支持 real

查看更多 →

列存表支持的数据类型 列存表支持的数据类型如表1所示。其他未列举的数据类型，暂不支持。 表1 列存表支持的数据类型 类别 数据类型 描述 长度 数值类型 smallint 小范围整数，别名为INT2。 2 integer 常用的整数，别名为INT4。 4 bigint 大范围的整数，别名为INT8。

查看更多 →

列存表支持的数据类型 列存表支持的数据类型如表1所示。其他未列举的数据类型，暂不支持。 表1 列存表支持的数据类型 类别 数据类型 描述 长度 数值类型 smallint 小范围整数，别名为INT2。 2 integer 常用的整数，别名为INT4。 4 bigint 大范围的整数，别名为INT8。

查看更多 →

带自定义函数的语句不下推 问题现象 SQL语句不下推。 原因分析 目前GaussDB(DWS)可以支持绝大多数常用函数的下推，不下推函数的场景主要出现在自定义函数属性定义错误的情况下。 不下推语句的执行方式没有利用分布式的优势，其在执行过程中，相当于把大量的数据和计算过程汇集到一个节点上去做，因此性能通常非常差。

查看更多 →

列存表支持的数据类型 列存表支持的数据类型如表1所示。其他未列举的数据类型，暂不支持。 表1 列存表支持的数据类型 类别 数据类型 描述 长度 数值类型 smallint 小范围整数，别名为INT2。 2 integer 常用的整数，别名为INT4。 4 bigint 大范围的整数，别名为INT8。

查看更多 →

存算分离类 没有/tmp目录权限导致执行访问OBS的作业报错 使用Hadoop客户端删除OBS上数据时报.Trash目录没有权限错误 由于 MRS 集群节点的NTP时间不同步导致集群访问OBS时鉴权失败

查看更多 →

存算分离函数 数据共享函数 父主题： 函数和操作符

查看更多 →

区块积累越来越大，会不会存不下？ 随着时间推移，交易量的增加， 区块链 会越来越长，占用的存储会越来越大，会不会存不下呢。 BCS 将提供两个可用方案供您选择： 存储扩容 登录区块链服务管理控制台，单击B CS 实例名称进入详情页。 在BCS实例详情页，单击“更多信息 > 网络存储”，获取节点名称对应的文件存储卷PVC名称。

查看更多 →

如何查看表是行存还是列存？ 表的存储方式由建表语句中的ORIENTATION参数控制，row表示行存，column表示列存。 8.1.2及之前版本，不指定ORIENTATION参数，默认为row行存。 8.1.3版本后，支持通过GUC参数default_orientation控制

查看更多 →

aster尝试启动两次失败 问题背景与现象 Yarn-client模式提交任务AppMaster尝试启动两次失败。 原因分析 Driver端异常: 16/05/11 18:10:56 INFO Client: client token: N/A diagnostics: Application

查看更多 →

元数据缓存文件存于何处？如何清理？ 通过KooCLI管理和使用您的各类云服务资源时，会远程获取您命令中目标云服务及其API的详情信息。为减少远程调用次数，提高响应速度，KooCLI引入了缓存机制，在运行过程中将云服务及其API的相关信息保存在本地缓存文件中，该文件称为元数据缓存文

查看更多 →

索引不合理 在基表扫描时，满足下述条件则上报相关告警： 对于行存表： 使用索引扫描，输出行数/扫描行数>1/1000且输出行数>1万行。 使用顺序扫描，输出行数/扫描行数<1/1000且输出行数<=1万行、扫描行数>1万行。 对于列存表： 使用索引扫描，输出行数/扫描行数>1/10000且输出行数>100。

查看更多 →

行列存压缩 GaussDB(DWS)中, 只支持列存表压缩功能，暂不支持行存表压缩功能。优化行列存压缩机制，DSC工具迁移时会根据GaussDB(DWS)的特性进行相应适配。 压缩参数 : table.compress.mode创建新表时，需要在CREATE TABLE语句中指定

查看更多 →

在性能问题的作业进行调优。 技术原理 图1 SQL自诊断技术原理 CN端对SQL进行查询编译生成计划树，通过诊断分析器对执行计划树诊断出查询模式下可识别的问题（包括统计信息未收集和SQL不下推的告警）。 DN端执行SQL语句，在运行时将有关统计信息写入DN共享内存。如果当前SQL

查看更多 →

配置目标端数据信息 概述 本节主要提供数据集成任务目标端信息的配置说明。目标端信息用于告诉ROMA Connect如何将待集成的数据写入到目标端，包括数据源、数据存储信息等。对于不同的数据源类型，其目标端信息配置有所差异。 数据迁移过程中若目标端数据存在主键冲突，则根据主键自动更新数据。

查看更多 →

为目标端数据源。 在创建任务页面中配置目标端信息。 表6 目标端DWS信息 参数 配置说明 目标端实例 配置为当前正在使用的ROMA Connect实例，源端实例配置后目标端自动关联，无需配置。 目标端集成应用 选择DWS数据源所属的集成应用，在接入数据源时已配置。 目标端数据类型

查看更多 →