华为云

面向未来的智能世界,数字化是企业发展的必由之路。数字化成功的关键是以云原生的思维践行云原生,全数字化、全云化、AI驱动,一切皆服务。

华为云将持续创新,携手客户、合作伙伴和开发者,致力于让云无处不在,让智能无所不及,共建智能世界云底座。

 
 

    华为gds 更多内容
  • 使用GDS从远端服务器导入数据

    使用GDS从远端 服务器 导入数据 关于GDS并行导入 准备源数据 安装配置和启动GDS 创建GDS外表 执行导入数据 处理导入错误 停止GDS GDS导入示例 父主题: 导入数据

    来自:帮助中心

    查看更多 →

  • 工具简介

    gds_install是用于批量安装gds的脚本工具,可大大提高GDS部署效率。 gds_uninstall gds_uninstall是用于批量卸载GDS的脚本工具。 gds_ctl gds_ctl是一个批量控制GDS启停的脚本工具,一次执行可以在多个节点上启动/停止相同端口的GDS服务进程,并在启动时为

    来自:帮助中心

    查看更多 →

  • GDS导入数据时是否支持使用公网/外网导入?

    GDS导入数据时是否支持使用公网/外网导入? 不支持。GDS导入数据的原理是,GDS服务器和 GaussDB (DWS)在内网互通的前提下,使用集群内每个DN去并行连接GDS服务器,以达到大容量并行导入的目的,因此必须确保GDS服务器与集群在同一个网络内。如果GDS为线下服务器,则需

    来自:帮助中心

    查看更多 →

  • 公共机制(选项参数、任务分配、压缩)

    错误码描述:Unexpected EOF on GDS connection %s: %m. 解决方案:数据库与GDS交换数据时出错。对端GDS可能运行在带SSL认证的安全模式,请检查GDS与DN之间的网络连接、网络环境、节点系统端口是否正常,查看GDS的“WARNING”和“ERROR”日志,定位原因。

    来自:帮助中心

    查看更多 →

  • 免费体验GaussDB(DWS)

    免费体验 GaussDB(DWS) 数据分析实验室是华为云官方实验平台,实验环境为华为云现网环境,整个实验过程完全免费。供您在最短时间内体验GaussDB(DWS)真实环境,快速上手。 开发者可通过表1实验手册指导,使用环境中预置的华为云账号,一键创建GaussDB(DWS)实验环境

    来自:帮助中心

    查看更多 →

  • 创建GDS外表失败,提示不支持ROUNDROBIN

    创建GDS外表失败,提示不支持ROUNDROBIN 问题现象 创建GDS外表失败,提示不支持ROUNDROBIN,报错信息如下所示: 1 ERROR: For foreign table ROUNDROBIN distribution type is built-in support

    来自:帮助中心

    查看更多 →

  • 执行导出数据

    序、子查询、limit等操作结果导出。 本版本中GDS导出已经支持CN RETRY(当前特性是实验室特性,使用时请联系华为工程师提供技术支持),当出现DN故障或者GTM故障导致的网络错误发生时会触发CN RETRY。注意要保证GDS 和内核版本一致或者都高于此版本。 任务示例 示

    来自:帮助中心

    查看更多 →

  • 使用GDS传输数据的过程中,报错:connection failure error

    使用GDS传输数据的过程中,报错:connection failure error 问题现象 在使用GDS传输数据的过程中,报错“connection failure error”。 原因分析 GDS进程崩溃。执行命令检查GDS进程是否崩溃: ps ux|grep gds 如果返回结果如下,则说明GDS进程启动成功:

    来自:帮助中心

    查看更多 →

  • 关于并行导入

    单行数据大小需<1GB。 GDS并发导入 数据量大,数据存储在多个服务器上时,在每个数据服务器上安装配置、启动GDS后,各服务器上的数据可以并行入库。如图2所示。 图2 多数据服务器并行导入 GDS进程数目不能超过DN数目。如果超过,会出现一个DN连接多个GDS进程的情形,可能会导致部分GDS异常运行,并有可能出现“Session

    来自:帮助中心

    查看更多 →

  • 示例

    GDS。 其中GDS安装路径为“/opt/bin/gds”,导出数据文件存放在“/output_data/”目录下,数据服务器所在IP为192.168.0.90,GDS侦听端口为5000,以后台方式运行。 /opt/bin/gds/gds -d /output_data -p 192

    来自:帮助中心

    查看更多 →

  • 使用GDS导出数据到远端服务器

    使用GDS导出数据到远端服务器 关于GDS并行导出 规划导出数据 安装配置和启动GDS 创建GDS外表 执行导出数据 停止GDS GDS导出示例 父主题: 导出数据

    来自:帮助中心

    查看更多 →

  • 示例1:Normal策略导入

    err_tpcds_reasons; 待数据导入完成后,以gds_user用户登录每台数据服务器,分别停止GDS。 以下以IP为192.168.0.90的数据服务器为例,停止GDS。其中GDS进程号为128954。 ps -ef|grep gds gds_user 128954 1 0

    来自:帮助中心

    查看更多 →

  • 使用GDS从远端服务器导入数据最佳实践

    ANALYZE product_info; 停止GDSgds_user用户登录安装GDS的数据服务器。 使用以下方式停止GDS。 执行如下命令,查询GDS进程号。其中,GDS进程号为128954。 ps -ef|grep gds gds_user 128954 1 0

    来自:帮助中心

    查看更多 →

  • OBS外表与GDS外表支持的数据格式有什么区别?

    OBS外表与GDS外表支持的数据格式有什么区别? OBS与GDS外表支持格式文件区别如下: OBS导入支持ORC、TEXT、JSON、 CS V、CARBONDATA、PARQUET文件格式,导出支持ORC、CSV、TEXT文件格式,缺省值为TEXT。 GDS导入导出支持的文件格式:

    来自:帮助中心

    查看更多 →

  • 并行导入

    2,最小单位为KB。 默认值:2GB gds_debug_mod 参数说明:为了增强对Gauss Data Service (以下简称GDS)相关问题的分析定位能力,可以通过此参数选择是否开启GDS的debug功能。参数开启后,将在集群节点对应的日志中输出GDS每次收发的包裹类型、命令交互

    来自:帮助中心

    查看更多 →

  • GAUSS-01371 -- GAUSS-01380

    socket不合法。 解决办法:请检查gds与数据节点的网络连接、网络环境、节点的系统端口是否正常。 GAUSS-01376: "Unexpected EOF on GDS connection '%s': %m" SQLSTATE: XX000 错误原因:系统内部错误。与GDS端交互数据时,发生了错误。

    来自:帮助中心

    查看更多 →

  • 教程:使用GDS从远端服务器导入数据

    教程:使用GDS从远端服务器导入数据 教程指引 先决条件 步骤1:准备源数据 步骤2:在数据服务器上安装配置和启动GDS 步骤3:在 GaussDB数据库 中创建外表 步骤4:将数据导入GaussDB 步骤5:分析和处理错误表中的错误信息 步骤6:优化导入数据的查询性能 步骤7:停止GDS

    来自:帮助中心

    查看更多 →

  • 导入数据

    导入数据 GaussDB提供了灵活的数据入库方式:GDS、INSERT、COPY以及gsql元命令\copy。各方式具有不同的特点:GDS因其并行的特点,导入效率高,适用于大批量数据的入库;其他三种方式适用于小批量数据入库,可以考虑其特点自行选择。各导入方式的特点请参见表1。 表1

    来自:帮助中心

    查看更多 →

  • 实例管理

    ,详见GDS-Kafka入库模式。 GDS-kafka只支持目标表表名和字段全小写。 GDS-Kafka的删除是根据扩展字段中的pos进行历史删除,如果入库数据中有delete操作,则必须使用扩展字段。 购买GDS-Kafka实例 使用数据迁移功能,首先需要购买一个GDS-kaf

    来自:帮助中心

    查看更多 →

  • 创建GDS外表并导入TPC-DS数据

    执行以下SQL语句创建GDS外表(共24张表)。 以下每个外表的“gsfs://192.168.0.90:500x/xxx | gsfs://192.168.0.90:500x/xxx”中的IP地址和端口,请替换成安装和启动GDS中的对应的GDS的监听IP和端口。如启动两个GDS,则使用“|

    来自:帮助中心

    查看更多 →

  • 服务端工具

    服务端工具 gs_dump gs_dumpall gs_restore gds_check gds_install gds_uninstall gds_ctl

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了