中软国际数据治理专业服务解决方案实践

执行导入数据 完成GDS的安装部署及外表创建后，本节介绍如何在 GaussDB 数据库中创建目标表并将数据导入目标表中。 对于记录数超过千万条的表，建议在执行全量数据导入前，先导入部分数据，以查看数据倾斜状态，避免导入大量数据后发现数据倾斜，调整成本高。 前提条件 需要确保每一个CN

查看更多 →

请确保需要导入的sheet表头不含空单元格，否则该sheet内数据导入失败。 仅数字、日期、布尔（默认为检查框）可以自动识别字段类型，其他内容默认文本。 选择需导入的工作表并预览数据，单击“下一步”。 在“数据预览”页签的“工作表”处选择需导入的sheet页数据，下方预览数据。 图2 数据预览 设置事件模板名称和表单字段类型，单击“生成表单”。

查看更多 →

查看报告Excel状态 功能介绍 根据任务ID查看报告Excel状态 URI GET /v1/{project_id}/sbc/report/excel/status 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 用户project_id

查看更多 →

发的导入任务，将数据源文件中的数据通过外表写入数据库目标表中。 数据源文件：存有数据的文件。文件中保存的是待导入数据库的数据。 数据 服务器 ：数据源文件所在的服务器称为数据服务器。基于安全考虑，建议数据服务器和GaussDB集群处于同一内网。 外表Foreign Table：用于识

查看更多 →

使用COPY命令导入数据 COPY命令用于从本地或其它数据库的多个数据源并行导入数据。COPY导入大量数据的效率要比INSERT语句高很多，而且存储数据也更有效率。 有关如何使用COPY命令的更多信息，请参考使用COPY FROM STDIN导入数据 。 使用gsql元命令导入数据 \cop

查看更多 →

梳理待导出数据的格式信息，确定创建外表时使用的数据格式参数的值。 根据前面步骤确定的参数，创建GDS外表。 示例 示例：创建GDS导出外表foreign_tpcds_reasons，待导出数据格式为 CS V，用于接收数据服务器上的数据。 其中设置的导出模式信息如下所示： 规划数据服务器

查看更多 →

s，待导出数据格式为CSV，用于接收数据服务器上的数据。 其中设置的导出模式信息如下所示： 规划数据服务器与集群处于同一内网，数据服务器IP为192.168.0.90，待导出的数据文件格式为CSV，选择并行导出模式为Remote模式。 假定启动GDS时，规划导出的数据文件存放目录

查看更多 →

DN（Datanode）：GaussDB(DWS)数据节点。接收CN下发的导入任务，将数据源文件中的数据通过外表写入数据库目标表中。 数据源文件：存有数据的文件。文件中保存的是待导入数据库的数据。 数据服务器：数据源文件所在的服务器称为数据服务器。基于安全考虑，建议数据服务器和GaussDB(DWS)集群处于同一内网。

查看更多 →

从Excel创建表单 使用说明 在Excel中设计好表单字段结构及相关数据，通过导入方式快速实现表单构建。导入的Excel表单，需满足如下条件： 仅支持导入单个Excel文件，文件中可以包含多个Sheet页。每个Sheet页将生成一个工作表。 单个文件最大不能超过10M。 表格列

查看更多 →

配置数据导入模板 使用说明 通过定义数据导入模板，定义后下载模板，录入数据，再导入数据并按照预定义的脚本处理数据。 场景描述 本节介绍的是在应用内配置数据导入模板，您还可以在管理中心进行配置，相关操作请参考通过配置数据导入模板进行数据导入。两者的区别是在应用中配置的数据导入模板，

查看更多 →

教程：使用GDS从远端服务器导入数据 教程指引 先决条件 步骤1：准备源数据 步骤2：在数据服务器上安装配置和启动GDS 步骤3：在GaussDB数据库中创建外表 步骤4：将数据导入GaussDB 步骤5：分析和处理错误表中的错误信息 步骤6：优化导入数据的查询性能 步骤7：停止GDS

查看更多 →

如何处理HetuEngine数据源丢失问题 问题 登录客户端查看HSConsole界面对接的数据源，数据源丢失。 回答 数据源丢失可能原因是DBservice主备倒换或数据库连接数使用率超过阈值造成，用户可以登录 FusionInsight Manager页面查看告警信息，根据告警

查看更多 →

数据类型不匹配问题如何处理？ 报错“data type not equal”时，按照堆栈信息，将对应的行数的数据类型修改为匹配的类型。 图1 报错信息 处理该问题时，pipeline_onnx_stable_diffusion_img2img_mslite.py文件的第454行修改如下：

查看更多 →

非ASCII数据，那么使用SQL_ASCII设置都是不明智的，因为PG将无法帮助你转换或者校验非ASCII字符。 数据库系统支持某种编码，主要涉及三个方面：数据库服务器支持，数据访问接口支持以及客户端工具支持。 数据库服务器字符编码 数据库服务器支持某种编码，是指数据库服务器能够

查看更多 →

原因分析 GDS外表系统内部默认以ROUNDROBIN分布方式创建，不支持在创建外表时显式添加ROUNDROBIN分布信息。 处理方法 在创建GDS外表时，去除指定的分布信息，即去掉语句中显示指定的“DISTRIBUTE BY ROUNDROBIN”即可。 父主题： 数据导入/导出

查看更多 →

使用GDS传输数据的过程中，报错：connection failure error 问题现象 在使用GDS传输数据的过程中，报错“connection failure error”。 原因分析 GDS进程崩溃。执行命令检查GDS进程是否崩溃： ps ux|grep gds 如果返回结果如下，则说明GDS进程启动成功：

查看更多 →

使用GDS导出数据到远端服务器 关于GDS并行导出 规划导出数据 安装配置和启动GDS 创建GDS外表 执行导出数据 停止GDS GDS导出示例 父主题： 导出数据

查看更多 →

数据库基本使用 如何通过数据管理服务(DAS)查询SQL语句 导出SQL查询结果到Excel出现乱码 误删数据库root账号怎么办？ 数据库实例被锁怎么处理？ 当业务压力过大时，备机的回放速度跟不上主机的速度如何处理？

查看更多 →

关于GDS并行导出 使用GDS工具将数据从数据库导出到普通文件系统中，适用于高并发、大量数据导出的场景。 当前版本的GDS支持从数据库导出到管道文件，该功能使GDS的导出更加灵活多变。 当GDS用户的本地磁盘空间不足时： 通过管道文件将从GDS导出的数据进行压缩减少磁盘空间。 通

查看更多 →

通过外表并行导入 关于并行导入 教程和最佳实践 准备源数据 安装配置和启动GDS 创建GDS外表 执行导入数据 处理错误表 停止GDS 示例 父主题： 导入数据

查看更多 →

创建GDS外表并导入TPC-DS数据 本文介绍如何通过GDS外表导入TPC-DS 1000x数据，表1列出了TPC-DS测试数据集中的表数据行数。 TPC-H请跳过本章节。 表数据行数 表1 TPC-DS 序号 表名 行数 1 customer_address 6,000,000

查看更多 →