GDS方式导入 安装和启动GDS 使用gsql连接DWS 创建GDS外表并导入TPC-H数据 创建GDS外表并导入TPC-DS数据 父主题： 建表与数据导入

查看更多 →

数据 服务器 上的数据。 以下以外表tpcds.foreign_tpcds_reasons1为例，讲解设置的导入外表参数信息。 其中设置的导入模式信息如下所示： 导入模式为Normal模式。 由于启动GDS时，设置的数据源文件存放目录为“/input_data/”，GDS监听端口为5

查看更多 →

数据服务器上的数据。 以下以外表tpcds.foreign_tpcds_reasons1为例，讲解设置的导入外表参数信息。 其中设置的导入模式信息如下所示： 导入模式为Normal模式。 由于启动GDS时，设置的数据源文件存放目录为“/input_data/”，GDS监听端口为5

查看更多 →

行指定操作时参数的排序规则来获得。如果该函数或操作符调用的结果是一种可排序的数据类型，万一有外围表达式要求函数或操作符表达式的排序规则，在解析时结果的排序规则也会被用作函数或操作符表达式的排序规则。 一个表达式的排序规则派生可以是显式或隐式。该区别会影响多个不同的排序规则出现在同

查看更多 →

变。 当GDS用户的本地磁盘空间不足时，可直接将hdfs上的数据写入到管道文件而不需要占用额外的磁盘空间。 当用户导入前需要清洗数据时，用户可以根据自己的需求编写程序，将需要处理的数据流式实时的写入管道文件，完成导入的数据清洗工作。 当前版本暂不支持SSL模式下GDS导入，请勿以SSL方式使用GDS。

查看更多 →

必须在root用户下执行脚本gds_uninstall。 必须包含--host、-U参数。 目前不支持跨平台的卸载操作。 --host参数指定的所有节点的密码必须保持一致，才能保证脚本成功进行远程卸载。 语法 gds_uninstall --host [/path/to/hostfile | ipaddr1

查看更多 →

GDS 安装配置和启动GDS 停止GDS GDS导入示例 gds gds_ctl.py 处理错误表

查看更多 →

进行处理，因此可以有效处理数据列中的换行符。 TEXT格式的文件，可以有效处理一些转义序列，因此无法正确处理数据列中的换行符。 FIXED格式的文件，适用于每条数据的数据列都比较固定的数据，长度不足的列会添加空格补齐。 转义序列指的是反斜杠开头的字符串，包括：\b（退格）、\f（

查看更多 →

SECURITY 参数说明 table_name 需要修改的外表名称。 取值范围：已存在的外表名。 option 需要修改的option名称。 取值范围：请参见CREATE FOREIGN TABLE的参数说明。 value option的新值。 示例 修改外表customer_ft属性，删除mode选项：

查看更多 →

进行处理，因此可以有效处理数据列中的换行符。 TEXT格式的文件，可以有效处理一些转义序列，因此无法正确处理数据列中的换行符。 FIXED格式的文件，适用于每条数据的数据列都比较固定的数据，长度不足的列会添加空格补齐。 转义序列指的是反斜杠开头的字符串，包括：\b（退格）、\f（

查看更多 →

导入数据 GaussDB 提供了灵活的数据入库方式：GDS、INSERT、COPY以及gsql元命令\copy。各方式具有不同的特点：GDS因其并行的特点，导入效率高，适用于大批量数据的入库；其他三种方式适用于小批量数据入库，可以考虑其特点自行选择。各导入方式的特点请参见表1。 表1

查看更多 →

必须在root用户下执行脚本gds_install。 用户需要检查上层目录权限，保证GDS用户对安装操作目录、安装目录及安装包有读写执行的权限。 目前不支持跨平台的安装部署。 执行命令节点也必须是安装部署机器之一。 --host参数指定的所有节点的密码必须保持一致，才能保证脚本成功进行远程部署。

查看更多 →

设置新的所有者 1 2 ALTER FOREIGN TABLE [ IF EXISTS ] tablename OWNER TO new_owner; 参数说明 table_name 需要修改的外表名称。 取值范围：已存在的外表名。 option 需要修改的option名称。

查看更多 →

进行处理，因此可以有效处理数据列中的换行符。 TEXT格式的文件，可以有效处理一些转义序列，因此无法正确处理数据列中的换行符。 FIXED格式的文件，适用于每条数据的数据列都比较固定的数据，长度不足的列会添加空格补齐。 转义序列指的是反斜杠开头的字符串，包括：\b（退格）、\f（

查看更多 →

设置新的所有者 1 2 ALTER FOREIGN TABLE [ IF EXISTS ] tablename OWNER TO new_owner; 参数说明 table_name 需要修改的外表名称。 取值范围：已存在的外表名。 option 需要修改的option名称。

查看更多 →

GDS导入失败后，磁盘占用空间增大 问题背景与现象 使用GDS导入数据失败，触发作业重跑。重新开始数据导入，完成导入作业后查看磁盘空间，发现磁盘占用空间比导入数据量大很多。 原因分析 在导入数据失败后，占用的磁盘空间没有释放。 解决办法 检测GDS导入作业的日志，查看是否有执行失败的现象。

查看更多 →

--host参数指定的所有节点的密码必须保持一致，才能保证脚本成功进行远程检查。 执行修复时，对配置劣于推荐值的参数，建议设置为OS中配置项的推荐值，具体见下表： 表1 OS配置项 参数 推荐值 net.core.somaxconn 65535 net.ipv4.tcp_max_syn_backlog

查看更多 →

显示版本信息。 兼容GDS原参数 -d dir 设置待导入数据文件的目录。在GDS进程权限允许的条件下，-d指定的目录会自动被创建。 -l log_file 设置日志文件。 与-R参数一起使用，可支持日志自动切分。当设置-R参数后，GDS会根据设置的值重新生成新的文件，以此来避免单个日志文件过大。

查看更多 →

py启动/停止gds。 参数说明 start 启动gds.conf中配置的gds。 stop 关闭当前用户有权限关闭的经配置文件启动的gds运行实例。 stop all 关闭当前用户有权限关闭的所有gds运行实例。 stop [ ip: ] port 关闭当前用户有权限关闭的特定gds

查看更多 →

设置待导入数据文件的目录。在gds进程权限允许的条件下，-d指定的目录会自动被创建。 -p ip:port 设置gds监听IP和监听端口。 IP的取值范围：IP需为合法IP地址。 IP的默认值：127.0.0.1。 监听端口的取值范围：1024~65535，正整数。 监听端口的默认值：8098。

查看更多 →

行加速。SMP开启之后会对对应的GDS产生成倍的压力。需要特别说明的是：SMP自适应衡量的标准是GaussDB的CPU压力，而不是GDS所承受的压力。 GDS与GaussDB通信要求物理网络畅通，并且尽量使用万兆网。千兆网无法承载高速的数据传输压力，极易出现断连。即使用千兆网时G

查看更多 →