gds服务 更多内容
  • 导入数据

    导入数据 从OBS并行导入数据 使用GDS从远端服务器导入数据 从 MRS 导入数据到集群 从 GaussDB (DWS)集群导入数据到新集群 基于GDS的跨集群互联互通 使用开源Kettle导入数据 使用gsql元命令\COPY导入数据 使用COPY FROM STDIN导入数据

    来自:帮助中心

    查看更多 →

  • 规划导出数据

    规划导出数据 操作场景 使用GDS从集群导出到数据之前,要提前准备需要导出的数据,并规划导出的路径。 规划导出路径 Remote模式 以root用户登录GDS数据服务器,创建导出的数据文件存放目录“/output_data”。 1 mkdir -p /output_data (

    来自:帮助中心

    查看更多 →

  • 下载客户端

    101及以上集群版本支持在console控制台下载。 GDS工具包 GDS工具包是数据服务工具。用户可以使用GDS工具将普通文件系统中的数据文件导入到GaussDB(DWS) 数据库中,GDS工具包需要安装在数据源文件所在的服务器上。数据源文件所在的服务器称为数据服务器,也称为GDS服务器。 下载客户端 表1 gsql下载地址

    来自:帮助中心

    查看更多 →

  • PGXC_BULKLOAD_INFO

    业务,源集群会额外获取远端集群端口号。 direction text 导入导出业务类型,取值包括:gds to file、gds from file、gds to pipe、gds from pipe、copy from、copy to。 min_done_lines json 语句在所有DN上的最小行数。

    来自:帮助中心

    查看更多 →

  • 教程和最佳实践

    教程和最佳实践 教程:使用GDS从远端服务器导入数据。通过一个导入任务帮您了解GDS导入的全过程。 GDS导入最佳实践给出了可以最大化利用系统资源,提高导入性能的方法,建议在开展数据导入前阅读以进行合理的导入方案规划和设计部署。 父主题: 通过外表并行导入

    来自:帮助中心

    查看更多 →

  • 执行导入数据

    。相关案例请参见多线程导入。 在资源许可的情况下,多台GDS服务器并发导入会很大程度上提高数据导入效率。相关案例请参见多数据服务器并行导入。 对于高并发的GDS导入场景,为了保持GDS和DN间的数据连接稳定,可以将GDS服务器环境和DN所在环境的TCP Keepalive检测时间

    来自:帮助中心

    查看更多 →

  • 执行导入数据

    例请参见示例:多线程导入。 在资源许可的情况下,多台GDS服务器并发导入会很大程度上提高数据导入效率。相关案例请参见示例:多数据服务器并行导入。 对于高并发的GDS导入场景,为了保持GDS和DN间的数据连接稳定,可以将GDS服务器环境和DN所在环境的TCP Keepalive检测

    来自:帮助中心

    查看更多 →

  • PGXC_BULKLOAD_STATISTICS

    integer 当前线程的轻量级线程号。 session_id bigint GDS的会话ID。 direction text 业务类型,取值包括:gds to file、gds from file、gds to pipe、gds from pipe、copy from、copy to。 query

    来自:帮助中心

    查看更多 →

  • 创建GDS外表失败,提示不支持ROUNDROBIN

    创建GDS外表失败,提示不支持ROUNDROBIN 问题现象 创建GDS外表失败,提示不支持ROUNDROBIN,报错信息如下所示: 1 ERROR: For foreign table ROUNDROBIN distribution type is built-in support

    来自:帮助中心

    查看更多 →

  • 导入数据最佳实践

    为了优化导入速度,建议拆分文件,使用多GDS进行并行导入。单个导入任务可以拆分成多个导入任务并发执行导入;多个导入任务使用同一GDS时,可以使用-t参数打开GDS多线程并发执行导入。GDS建议挂载在不同物理盘以及不同网卡上,避免物理IO以及网络可能出现的瓶颈。 在GDS IO与网卡未达到物理瓶

    来自:帮助中心

    查看更多 →

  • PG_BULKLOAD_STATISTICS

    integer 当前线程的轻量级线程号。 session_id bigint GDS的会话ID。 direction text 业务类型,取值包括:gds to file、gds from file、gds to pipe、gds from pipe、copy from、copy to。 query

    来自:帮助中心

    查看更多 →

  • 实例管理

    ,详见GDS-Kafka入库模式。 GDS-kafka只支持目标表表名和字段全小写。 GDS-Kafka的删除是根据扩展字段中的pos进行历史删除,如果入库数据中有delete操作,则必须使用扩展字段。 购买GDS-Kafka实例 使用数据迁移功能,首先需要购买一个GDS-kaf

    来自:帮助中心

    查看更多 →

  • GAUSS-01371 -- GAUSS-01380

    socket不合法。 解决办法:请检查gds与数据节点的网络连接、网络环境、节点的系统端口是否正常。 GAUSS-01376: "Unexpected EOF on GDS connection '%s': %m" SQLSTATE: XX000 错误原因:系统内部错误。与GDS端交互数据时,发生了错误。

    来自:帮助中心

    查看更多 →

  • 并行导入

    2,最小单位为KB。 默认值:2GB gds_debug_mod 参数说明:为了增强对Gauss Data Service (以下简称GDS)相关问题的分析定位能力,可以通过此参数选择是否开启GDS的debug功能。参数开启后,将在集群节点对应的日志中输出GDS每次收发的包裹类型、命令交互

    来自:帮助中心

    查看更多 →

  • OBS外表与GDS外表支持的数据格式有什么区别?

    OBS外表与GDS外表支持的数据格式有什么区别? OBS与GDS外表支持格式文件区别如下: OBS导入支持ORC、TEXT、JSON、 CS V、CARBONDATA、PARQUET文件格式,导出支持ORC、CSV、TEXT文件格式,缺省值为TEXT。 GDS导入导出支持的文件格式:

    来自:帮助中心

    查看更多 →

  • 导入导出

    导入导出 导入数据最佳实践 GDS实践指南 从OBS导入数据到集群 使用GDS从远端服务器导入数据 查看或导入MRS的Hive数据 跨集群访问HiveMetaStore元数据 导入远端DWS数据源最佳实践 导出ORC数据到MRS

    来自:帮助中心

    查看更多 →

  • 导入数据

    导入数据 GaussDB提供了灵活的数据入库方式:GDS、INSERT、COPY以及gsql元命令\copy。各方式具有不同的特点:GDS因其并行的特点,导入效率高,适用于大批量数据的入库;其他三种方式适用于小批量数据入库,可以考虑其特点自行选择。各导入方式的特点请参见表1。 表1

    来自:帮助中心

    查看更多 →

  • 下载客户端

    101及以上集群版本支持在控制台下载。 GDS工具包 GDS工具包是数据服务工具。用户可以使用GDS工具将普通文件系统中的数据文件导入到GaussDB(DWS)数据库中,GDS工具包需要安装在数据源文件所在的服务器上。数据源文件所在的服务器称为数据服务器,也称为GDS服务器。 下载客户端 登录GaussDB(DWS)管理控制台。

    来自:帮助中心

    查看更多 →

  • 连接管理

    如果目标数据源为云上服务,则网络互通需满足如下条件: GDS-kafka集群与云上服务处于不同区域的情况下,需要通过公网或者专线打通网络。通过公网互通时,需确保GDS-kafka集群已绑定EIP,数据源所在的主机可以访问公网且防火墙规则已开放连接端口。 GDS-kafka集群与云上服务同区域情

    来自:帮助中心

    查看更多 →

  • 创建GDS外表并导入TPC-DS数据

    执行以下SQL语句创建GDS外表(共24张表)。 以下每个外表的“gsfs://192.168.0.90:500x/xxx | gsfs://192.168.0.90:500x/xxx”中的IP地址和端口,请替换成安装和启动GDS中的对应的GDS的监听IP和端口。如启动两个GDS,则使用“|

    来自:帮助中心

    查看更多 →

  • PGXC

    integer 当前线程的轻量级线程号。 session_id bigint GDS的会话ID。 direction text 业务类型,取值包括:gds to file、gds from file、gds to pipe、gds from pipe、copy from、copy to。 query

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了