华为云

面向未来的智能世界,数字化是企业发展的必由之路。数字化成功的关键是以云原生的思维践行云原生,全数字化、全云化、AI驱动,一切皆服务。

华为云将持续创新,携手客户、合作伙伴和开发者,致力于让云无处不在,让智能无所不及,共建智能世界云底座。

 
 

    华为gds 更多内容
  • 创建GDS外表

    创建GDS外表 外表中配置了数据源格式信息、GDS服务的访问信息,从而 GaussDB 最终可以通过外表将数据 服务器 上的数据引流进数据库实表中。 操作步骤 收集数据源格式信息、GDS服务的访问信息。 需要收集的主要数据源格式信息如下: format:GDS外表导入支持 CS V、TEXT

    来自:帮助中心

    查看更多 →

  • 创建GDS外表

    数据。 示例: GDS数据服务器IP为192.168.0.90,假定启动GDS时设置的监听端口为5000,设置的导出后文件存放目录为“/output_data/”。 根据以上情况,在创建外表时,指定参数“location”为“gsfs://192.168.0.90:5000/”。

    来自:帮助中心

    查看更多 →

  • 创建GDS外表

    创建GDS外表 操作步骤 根据规划导出数据中规划的路径确定外表参数location的值。 Remote模式 请通过URL方式设置参数“location”,用于指定导出的数据文件存放路径。 不需要指定文件名。 当有多个路径时,只有第一个路径有效。 示例: GDS数据服务器IP为192

    来自:帮助中心

    查看更多 →

  • GDS导入/导出类问题

    GDS导入/导出类问题 GDS导入/导出容易遇到字符集的问题,特别是不同类型的数据库或者不同编码类型的数据库进行迁移的过程中,往往会导致数据入不了库,严重阻塞数据迁移场景相关业务。 区域支持 区域支持指的是应用遵守文化偏好的问题,包括字母表、排序、数字格式等。区域是在使用init

    来自:帮助中心

    查看更多 →

  • GDS管道文件常见问题

    GDS管道文件常见问题 注意事项 GDS支持并发导入导出,gds -t参数用于设置GDS的工作线程池大小,控制并发场景下同时工作的工作线程数且不会加速单个SQL任务。gds -t缺省值为8,上限值为200。在使用管道功能进行导入导出时,-t参数应不低于业务并发数。如果是双集群互联

    来自:帮助中心

    查看更多 →

  • 安装配置和启动GDS

    安装配置和启动GDS GDS是GaussDB(DWS)提供的数据服务工具,通过和外表机制的配合,实现数据的高速导出。 详细内容请参见安装配置和启动GDS。 父主题: 使用GDS导出数据到远端服务器

    来自:帮助中心

    查看更多 →

  • 安装配置和启动GDS

    /opt/bin/dws/gds/bin source gds_env 启动GDS服务。 GDS是绿色软件,解压后启动即可。GDS启动方式有两种: 方式一:直接使用“gds”命令,在命令项中设置启动参数。 方式二:将启动参数写进配置文件“gds.conf”后, 使用“gds_ctl.py”命令启动。

    来自:帮助中心

    查看更多 →

  • 关于GDS并行导入

    表。 GDS并发导入 数据量大,数据存储在多个服务器上时,在每个数据服务器上安装配置、启动GDS后,各服务器上的数据可以并行入库。如图2所示。 图2 多数据服务器并行导入 GDS进程数目不能超过DN数目。如果超过,会出现一个DN连接多个GDS进程的情形,可能会导致部分GDS异常运行。

    来自:帮助中心

    查看更多 →

  • 关于GDS并行导出

    关于GDS并行导出 使用GDS工具将数据从数据库导出到普通文件系统中,适用于高并发、大量数据导出的场景。 当前版本的GDS支持从数据库导出到管道文件,该功能使GDS的导出更加灵活多变。 当GDS用户的本地磁盘空间不足时: 通过管道文件将从GDS导出的数据进行压缩减少磁盘空间。 通

    来自:帮助中心

    查看更多 →

  • CREATE FOREIGN TABLE (GDS导入导出)

    FOREIGN TABLE (GDS导入导出) 创建GDS外表。 功能描述 在当前数据库创建一个GDS外表,用于数据并行导入导出。GDS外表分为只读外表和只写外表,分别用于数据并行导入和并行导出,缺省为只读外表。 注意事项 外表由命令执行者所有; GDS外表不需要显式指定分布方式,默认支持ROUNDROBIN分布方式;

    来自:帮助中心

    查看更多 →

  • 安装配置和启动GDS

    /opt/bin/dws/gds/bin source gds_env 启动GDS服务。 GDS是绿色软件,解压后启动即可。GDS启动方式有两种: 方式一:直接使用“gds”命令,在命令项中设置启动参数。 方式二:将启动参数写进配置文件“gds.conf”后, 使用“gds_ctl.py”命令启动。

    来自:帮助中心

    查看更多 →

  • 安装配置和启动GDS

    操作步骤 登录待安装GDS的数据服务器,创建GDS专有用户及其所属的用户组。此用户用于启动GDS及读取源数据。 groupadd gdsgrp useradd -g gdsgrp gds_user 切换到gds_user用户。 su - gds_user 创建存放GDS工具包的目录/opt/bin。

    来自:帮助中心

    查看更多 →

  • 安装配置和启动GDS

    安装配置和启动GDS GDS是GaussDB提供的数据服务工具,通过和外表机制的配合,实现数据的高速导出。根据导出作业的相关负载,检查GDS所在服务器与GaussDB集群的各物理集群相连通,并且上有充足的内存、句柄、磁盘空间等系统资源。详细内容请参见安装配置和启动GDS。 父主题:

    来自:帮助中心

    查看更多 →

  • GDS导入失败后,磁盘占用空间增大

    GDS导入失败后,磁盘占用空间增大 问题背景与现象 使用GDS导入数据失败,触发作业重跑。重新开始数据导入,完成导入作业后查看磁盘空间,发现磁盘占用空间比导入数据量大很多。 原因分析 在导入数据失败后,占用的磁盘空间没有释放。 解决办法 检测GDS导入作业的日志,查看是否有执行失败的现象。

    来自:帮助中心

    查看更多 →

  • 基于GDS的跨集群互联互通

    规划部署GDS服务器,确保所有的GDS服务器可以和上面配置的两个集群所有节点网络连通,即GDS服务器的安全组入方向要放通对应的GDS端口(例如5000)和DWS端口(默认8000)。部署GDS请参考安装配置和启动GDS。 启动GDS时,可指定任意目录作为数据中转的目录,例如/opt,启动命令示例如下: /opt/gds/bin/gds

    来自:帮助中心

    查看更多 →

  • 导入远端DWS数据源最佳实践

    useradd -g gdsgrp gds_user chown -R gds_user:gdsgrp /opt/gds chown -R gds_user:gdsgrp /input_data 切换到gds_user用户。 su - gds_user 导入GDS环境变量。 仅8.1.x及以上版本需要执行,低版本请跳过。

    来自:帮助中心

    查看更多 →

  • ALTER FOREIGN TABLE(GDS导入导出)

    ALTER FOREIGN TABLE(GDS导入导出) 功能描述 对外表进行修改。 注意事项 无。 语法格式 设置外表属性 1 2 ALTER FOREIGN TABLE [ IF EXISTS ] table_name OPTIONS ( {[ ADD | SET |

    来自:帮助中心

    查看更多 →

  • ALTER FOREIGN TABLE (GDS导入导出)

    ALTER FOREIGN TABLE (GDS导入导出) 功能描述 对外表进行修改。 注意事项 无。 语法格式 设置外表属性 1 2 ALTER FOREIGN TABLE [ IF EXISTS ] table_name OPTIONS ( {[ ADD | SET

    来自:帮助中心

    查看更多 →

  • CREATE FOREIGN TABLE (GDS导入导出)

    FOREIGN TABLE (GDS导入导出) 创建GDS外表。 功能描述 在当前数据库创建一个GDS外表,用于数据并行导入导出。GDS外表分为只读外表和只写外表,分别用于数据并行导入和并行导出,缺省为只读外表。 注意事项 外表由命令执行者所有; GDS外表不需要显式指定分布方式,默认支持ROUNDROBIN分布方式;

    来自:帮助中心

    查看更多 →

  • 基于GDS的集群互联互通

    化为一对GDS不落地导入导出作业,分别在目标集群、源集群上执行,形成高效实时的数据中转通路,实现数据迁移同步。执行时,可以选择在目标集群或源集群上发起,分别对应“拉”、“推”两种方式。 图1 拉取方式 ① 远程连接源集群,创建GDS只写外表,发起导出作业。 ② 创建GDS只读外表,发起导入作业。

    来自:帮助中心

    查看更多 →

  • 步骤2:在数据服务器上安装配置和启动GDS

    ert/gds ./ 启动GDS。 非SSL模式传输数据的情况下,使用如下命令启动GDS。 /opt/bin/gds/gds -d /input_data/ -p 192.168.0.90:5000 -H 10.10.0.1/24 -l /opt/bin/gds/gds_log.txt

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了