华为云

面向未来的智能世界,数字化是企业发展的必由之路。数字化成功的关键是以云原生的思维践行云原生,全数字化、全云化、AI驱动,一切皆服务。

华为云将持续创新,携手客户、合作伙伴和开发者,致力于让云无处不在,让智能无所不及,共建智能世界云底座。

 
 

    华为gds 更多内容
  • 并行导入

    65535 默认值:256 gds_debug_mod 参数说明:为了增强对Gauss Data Service (以下简称GDS)相关问题的分析定位能力,可以通过此参数选择是否开启GDS的debug功能。参数开启后,将在集群节点对应的日志中输出GDS每次收发的包裹类型、命令交互

    来自:帮助中心

    查看更多 →

  • 执行导入数据

    等。相关案例请参见多线程导入。 在资源许可的情况下,多台GDS 服务器 并发导入会很大程度上提高数据导入效率。相关案例请参见多数据服务器并行导入。 对于高并发的GDS导入场景,为了保持GDS和DN间的数据连接稳定,可以将GDS服务器环境和DN所在环境的TCP Keepalive检测时

    来自:帮助中心

    查看更多 →

  • 教程指引

    本教程旨在演示使用GDS(Gauss Data Service)工具将远端服务器上的数据导入 GaussDB 中的办法,帮助您学习如何通过GDS进行数据导入的方法。 在本教程中,您将: 生成本教程需要使用的 CS V格式的数据源文件。 将数据源文件上传到数据服务器。 创建外表,用于对接GDS和Gau

    来自:帮助中心

    查看更多 →

  • 导入数据

    导入数据 从OBS并行导入数据 使用GDS从远端服务器导入数据 从 MRS 导入数据到集群 从GaussDB(DWS)集群导入数据到新集群 基于GDS的跨集群互联互通 使用开源Kettle导入数据 使用gsql元命令\COPY导入数据 使用COPY FROM STDIN导入数据

    来自:帮助中心

    查看更多 →

  • 教程和最佳实践

    教程和最佳实践 教程:使用GDS从远端服务器导入数据。通过一个导入任务帮您了解GDS导入的全过程。 GDS导入最佳实践给出了可以最大化利用系统资源,提高导入性能的方法,建议在开展数据导入前阅读以进行合理的导入方案规划和设计部署。 父主题: 通过外表并行导入

    来自:帮助中心

    查看更多 →

  • 规划导出数据

    规划导出数据 操作场景 使用GDS从集群导出到数据之前,要提前准备需要导出的数据,并规划导出的路径。 规划导出路径 Remote模式 以root用户登录GDS数据服务器,创建导出的数据文件存放目录“/output_data”。 1 mkdir -p /output_data (

    来自:帮助中心

    查看更多 →

  • SSB数据生成

    com/vadimtk/ssb-dbgen.git cd ssb-dbgen && make 生成数据。 文件生成路径最好符合安装和启动GDS中SSB所使用的路径,否则需要修改安装和启动GDSGDS的启动路径。 ./dbgen -s 100 -T c ./dbgen -s 100 -T l ./dbgen

    来自:帮助中心

    查看更多 →

  • 使用GDS-Kafka工具迁移数据至GaussDB(DWS)集群

    使用GDS-Kafka工具迁移数据至GaussDB(DWS)集群 概述 实例管理 连接管理 映射管理 作业管理 父主题: 迁移业务数据至GaussDB(DWS)集群

    来自:帮助中心

    查看更多 →

  • PGXC

    PGXC_BULKLOAD_PROGRESS显示导入业务的执行进度,仅支持GDS普通文件导入业务。需要有系统管理员权限才可以访问此视图 表1 PGXC_BULKLOAD_PROGRESS字段 名称 类型 描述 session_id bigint GDS的会话ID。 query_id bigint 查询ID,对应debug_query_id。

    来自:帮助中心

    查看更多 →

  • PGXC_BULKLOAD_PROGRESS

    PGXC_BULKLOAD_PROGRESS显示导入业务的执行进度,仅支持GDS普通文件导入业务。需要有系统管理员权限才可以访问此视图 表1 PGXC_BULKLOAD_PROGRESS字段 名称 类型 描述 session_id bigint GDS的会话ID。 query_id bigint 查询ID,对应debug_query_id。

    来自:帮助中心

    查看更多 →

  • 下载客户端

    101及以上集群版本支持在console控制台下载。 GDS工具包 GDS工具包是数据服务工具。用户可以使用GDS工具将普通文件系统中的数据文件导入到GaussDB(DWS)数据库中,GDS工具包需要安装在数据源文件所在的服务器上。数据源文件所在的服务器称为数据服务器,也称为GDS服务器。 下载客户端 表1

    来自:帮助中心

    查看更多 →

  • 执行导入数据

    案例请参见示例:多线程导入。 在资源许可的情况下,多台GDS服务器并发导入会很大程度上提高数据导入效率。相关案例请参见示例:多数据服务器并行导入。 对于高并发的GDS导入场景,为了保持GDS和DN间的数据连接稳定,可以将GDS服务器环境和DN所在环境的TCP Keepalive检

    来自:帮助中心

    查看更多 →

  • 创建GDS外表并导入TPC-H数据

    执行以下命令创建GDS外表(8张表)。 以下每个外表的“gsfs://192.168.0.90:500x/xxx | gsfs://192.168.0.90:500x/xxx”中的IP地址和端口,请替换成安装和启动GDS中的对应的GDS的监听IP和端口。如启动两个GDS,则使用“|”

    来自:帮助中心

    查看更多 →

  • GDS导入数据时,脚本执行报错:out of memory

    GDS导入数据时,脚本执行报错:out of memory 问题现象 在使用GDS导入数据时,脚本执行报错“out of memory”。 原因分析 使用copy命令或者导入数据时,源数据单行数据的大小超过1GB。 由于源文件中的格式符不成对出现,比如引号,文件格式异常导致系统识别的单行数据过大超过1GB。

    来自:帮助中心

    查看更多 →

  • GAUSS-01251 -- GAUSS-01260

    SQLSTATE: XX000 错误原因:GDS服务中URL参数错误。 解决办法:请检查URL参数值及格式正确性。 GAUSS-01254: "unrecognized URL '%s'" SQLSTATE: XX000 错误原因:GDS服务中URL参数错误。 解决办法:请检查URL参数值及格式正确性。

    来自:帮助中心

    查看更多 →

  • 导入导出

    导入导出 导入数据最佳实践 GDS实践指南 迁移OBS桶数据至GaussDB(DWS)集群 使用GDS从远端服务器上导入表数据到GaussDB(DWS)集群 从MRS Hive导入表数据到GaussDB(DWS)集群 使用EXTERNAL SCHEMA跨集群访问HiveMetaStore元数据

    来自:帮助中心

    查看更多 →

  • 并行导入

    1073741823,最小单位为KB。 默认值:2GB gds_debug_mod 参数说明:为了增强对Gauss Data Service (以下简称GDS)相关问题的分析定位能力,可以通过此参数选择是否开启GDS的debug功能。参数开启后,将在集群节点对应的日志中输出GDS每次收发的包裹类型、命令交互

    来自:帮助中心

    查看更多 →

  • 下载客户端

    101及以上集群版本支持在控制台下载。 GDS工具包 GDS工具包是数据服务工具。用户可以使用GDS工具将普通文件系统中的数据文件导入到GaussDB(DWS)数据库中,GDS工具包需要安装在数据源文件所在的服务器上。数据源文件所在的服务器称为数据服务器,也称为GDS服务器。 下载客户端 登录GaussDB(DWS)管理控制台。

    来自:帮助中心

    查看更多 →

  • GAUSS-04661 -- GAUSS-04670

    SQLSTATE: XX000 错误原因:GDS导入数据对于某一个DN未分配导入任务。 解决办法:可尝试再次执行解决。 GAUSS-04665: "Receive wrong messge %d from GDS." SQLSTATE: XX000 错误原因:DN从GDS端获取错误消息。 解决办法

    来自:帮助中心

    查看更多 →

  • 连接管理

    指导用户根据数据源类型创建对应的连接。 前提条件 已创建GDS-kafka集群。 GDS-kafka集群与目标数据源可以正常通信。 如果目标数据源为云下的数据库,则需要通过公网或者专线打通网络。通过公网互通时,需确保GDS-kafka集群已绑定EIP、云上安全组出方向放通云下数据

    来自:帮助中心

    查看更多 →

  • PGXC

    PGXC_BULKLOAD_PROGRESS显示导入业务的执行进度,仅支持GDS普通文件导入业务。需要有系统管理员权限才可以访问此视图。 表1 PGXC_BULKLOAD_PROGRESS字段 名称 类型 描述 session_id bigint GDS的会话ID。 query_id bigint 查询

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了