gds数据_gds_ctl.py-华为云

gds_ctl.py

status 查询通过gds.conf启动的gds实例的运行状态。示例启动gds。 python3 gds_ctl.py start 停止由配置文件启动的gds。 python3 gds_ctl.py stop 停止所有当前用户有权限关闭的gds。 python3 gds_ctl.py

来自：帮助中心

查看更多 →
使用GDS导出数据到远端服务器

使用GDS导出数据到远端服务器关于GDS并行导出规划导出数据安装配置和启动GDS 创建GDS外表执行导出数据停止GDS GDS导出示例父主题：导出数据

来自：帮助中心

查看更多 →
创建GDS外表并导入TPC-DS数据

创建GDS外表并导入TPC-DS数据本文介绍如何通过GDS外表导入TPC-DS 1000x数据，表1列出了TPC-DS测试数据集中的表数据行数。 TPC-H请跳过本章节。表数据行数表1 TPC-DS 序号表名行数 1 customer_address 6,000,000

来自：帮助中心

查看更多 →
关于GDS并行导入

DN（Datanode）： GaussDB (DWS)数据节点。接收CN下发的导入任务，将数据源文件中的数据通过外表写入数据库目标表中。数据源文件：存有数据的文件。文件中保存的是待导入数据库的数据。数据服务器：数据源文件所在的服务器称为数据服务器。基于安全考虑，建议数据服务器和GaussDB(DWS)集群处于同一内网。

来自：帮助中心

查看更多 →
创建GDS外表并导入TPC-H数据

创建GDS外表并导入TPC-H数据本文介绍如何通过GDS外表导入TPC-H 1000x数据，表1列出了TPC-H测试数据集中的表数据行数。 TPC-DS请跳过本章节。表数据行数表1 TPC-H 序号表名行数 1 region 5 2 nation 25 3 supplier

来自：帮助中心

查看更多 →
GDS导入数据时，脚本执行报错：out of memory

GDS导入数据时，脚本执行报错：out of memory 问题现象在使用GDS导入数据时，脚本执行报错“out of memory”。原因分析使用copy命令或者导入数据时，源数据单行数据的大小超过1GB。由于源文件中的格式符不成对出现，比如引号，文件格式异常导致系统识别的单行数据过大超过1GB。

来自：帮助中心

查看更多 →
使用GDS-Kafka工具迁移数据至GaussDB(DWS)集群

使用GDS-Kafka工具迁移数据至GaussDB(DWS)集群概述实例管理连接管理映射管理作业管理父主题：迁移业务数据至GaussDB(DWS)集群

来自：帮助中心

查看更多 →
安装配置和启动GDS

安装配置和启动GDS GDS是GaussDB(DWS)提供的数据服务工具，通过和外表机制的配合，实现数据的高速导出。安装配置和启动GDS操作步骤如下，详细内容请参见安装配置和启动GDS。操作步骤在使用GDS导入/导出数据前，请先参考教程：使用GDS从远端服务器导入数据中的步骤：

来自：帮助中心

查看更多 →
GDS管道文件常见问题

GDS导入时默认对端程序超过1小时未向管道中写入数据导入任务将会超时报错。 GDS导出时默认对端程序超过1小时未从管道中读数据导出任务将会超时报错。需确保GDS版本和数据库内核版本都已经支持管道文件导入导出功能。当外表参数auto_create_pipe设置为true时，GDS自动创建管道文件可能存在

来自：帮助中心

查看更多 →
安装配置和启动GDS

安装配置和启动GDS 操作场景 GaussDB(DWS)提供了数据服务工具GDS来帮助分发待导入的用户数据及实现数据的高速导入。GDS需部署到数据服务器上。数据量大，数据存储在多个服务器上时，在每个数据服务器上安装配置、启动GDS后，各服务器上的数据可以并行入库。GDS在各台数据服务器

来自：帮助中心

查看更多 →
安装配置和启动GDS

安装配置和启动GDS 操作场景 GaussDB(DWS)提供了数据服务工具GDS来帮助分发待导入的用户数据及实现数据的高速导入。GDS需部署到数据服务器上。数据量大，数据存储在多个服务器上时，在每个数据服务器上安装配置、启动GDS后，各服务器上的数据可以并行入库。GDS在各台数据服务器

来自：帮助中心

查看更多 →
CREATE FOREIGN TABLE (GDS导入导出)

外表的数据源位置，目前支持URL方式的描述。多个URL使用‘|’分隔。 gds目前可以支持导出的时候自动创建外表定义的目录。如外表localtion 定义 "gsfs:// 192.168.0.91:5000/2019/09" 执行导出任务的时候，如果gds数据目录下的子目录 "2019/09" 不存在则会自动的

来自：帮助中心

查看更多 →
CREATE FOREIGN TABLE (GDS导入导出)

外表的数据源位置，目前支持URL方式的描述。多个URL使用‘|’分隔。 gds目前可以支持导出的时候自动创建外表定义的目录。如外表localtion定义“gsfs:// 192.168.0.91:5000/2019/09”执行导出任务的时候，如果gds数据目录下的子目录“2019/09”不存在则会自动的创建该子目

来自：帮助中心

查看更多 →
工具简介

高执行成功率。 gds_install gds_install是用于批量安装gds的脚本工具，可大大提高GDS部署效率。 gds_uninstall gds_uninstall是用于批量卸载GDS的脚本工具。 gds_ctl gds_ctl是一个批量控制GDS启停的脚本工具，一次

来自：帮助中心

查看更多 →
CREATE FOREIGN TABLE (GDS导入导出)

外表的数据源位置，目前支持URL方式的描述。多个URL使用‘|’分隔。 gds目前可以支持导出的时候自动创建外表定义的目录。如外表localtion定义 "gsfs:// 192.168.0.91:5000/2019/09" 执行导出任务的时候，如果gds数据目录下的子目录 "2019/09" 不存在则会自动的创

来自：帮助中心

查看更多 →
数据库对象命名

数据库对象命名数据库对象命名需要满足约束：标识符表长度不超过63个字节。若需要对建有全局二级索引（GSI）的表执行COPY、GDS数据导入操作，则表名长度不超过38个字节。标识符以字母或下划线开头，中间字符可以是字母、数字、下划线、$、#。若标识符被双引号（""）包含或者

来自：帮助中心

查看更多 →
公共机制（选项参数、任务分配、压缩）

错误码描述：Unexpected EOF on GDS connection %s: %m. 解决方案：数据库与GDS交换数据时出错。对端GDS可能运行在带SSL认证的安全模式，请检查GDS与DN之间的网络连接、网络环境、节点系统端口是否正常，查看GDS的“WARNING”和“ERROR”日志，定位原因。

来自：帮助中心

查看更多 →
ALTER FOREIGN TABLE (GDS导入导出)

ALTER FOREIGN TABLE (GDS导入导出) 功能描述对外表进行修改。注意事项无。语法格式设置外表属性 1 2 ALTER FOREIGN TABLE [ IF EXISTS ] table_name OPTIONS ( {[ ADD | SET

来自：帮助中心

查看更多 →
使用GDS传输数据的过程中，报错：connection failure error

使用GDS传输数据的过程中，报错：connection failure error 问题现象在使用GDS传输数据的过程中，报错“connection failure error”。原因分析 GDS进程崩溃。执行命令检查GDS进程是否崩溃： ps ux|grep gds 如果返回结果如下，则说明GDS进程启动成功：

来自：帮助中心

查看更多 →
使用GDS从远端服务器上导入表数据到GaussDB(DWS)集群

ANALYZE product_info; 停止GDS 以gds_user用户登录安装GDS的数据服务器。使用以下方式停止GDS。执行如下命令，查询GDS进程号。其中，GDS进程号为128954。 ps -ef|grep gds gds_user 128954 1 0

来自：帮助中心

查看更多 →
ALTER FOREIGN TABLE（GDS导入导出）

ALTER FOREIGN TABLE（GDS导入导出）功能描述对外表进行修改。注意事项无。语法格式设置外表属性 1 2 ALTER FOREIGN TABLE [ IF EXISTS ] table_name OPTIONS ( {[ ADD | SET |

来自：帮助中心

查看更多 →