中软国际数据治理专业服务解决方案实践

数据导入 数据管理服务支持从本地或者OBS桶导入数据，进行数据的备份和迁移。 使用须知 当需要进行数据备份或迁移时，您可以将数据导入目标数据表，目标 CS V表数据类型须与待导入表数据类型保持一致，SQL文件同理。 导入单文件大小最大可达1GB。 可以支持导入的数据文件类型包括CSV格式和SQL文件格式。如果MySQL

查看更多 →

数据导入 数据管理服务支持从本地或者OBS桶导入数据，进行数据的备份和迁移。 使用须知 当需要进行数据备份或迁移时，您可以将数据导入目标数据表，目标CSV表数据类型须与待导入表数据类型保持一致，SQL文件同理。 导入单文件大小最大可达1GB。 可以支持导入的数据文件类型包括CSV格式和SQL文件格式。如果MySQL

查看更多 →

数据导入 数据管理服务支持从本地或者OBS桶导入数据，进行数据的备份和迁移。 使用须知 当需要进行数据备份或迁移时，您可以将数据导入目标数据表，目标CSV表数据类型须与待导入表数据类型保持一致，SQL文件同理。 导入单文件大小最大可达1GB。 可以支持导入的数据文件类型包括CSV

查看更多 →

选择“系统管理 > 数据处理 > 数据导入”，表示导入对象数据。选择该菜单导出对象数据前，必须在导入对象的“基本信息”勾选“允许API批量访问”。 单击“新建”，配置“导入类型”，拖入待导入文件，单击“导入”。 导入对象数据时，还需要设置导入记录ID是否为空。 导入记录ID值为空：导入的数据记录ID值为空，系统将自动生成随机ID。

查看更多 →

\COPY只适合小批量、格式良好的数据导入，不会对非法字符做预处理，也无容错能力，无法适用于含有异常数据的场景。导入数据应优先选择COPY。 通过INSERT语句直接写入数据 使用COPY FROM STDIN导入数据 使用gsql元命令导入数据 更新表中数据 深层复制 分析表 对表执行VACUUM

查看更多 →

本实践预计时长：1小时，基本流程如下： 创建 MRS 分析集群（选择Hive、Spark、Tez组件）。 通过将本地txt数据文件上传至OBS桶，再通过OBS桶导入Hive，并由txt存储表导入ORC存储表。 创建MRS数据源连接。 创建外部 服务器 。 创建外表。 通过外表导入DWS本地表。 创建MRS分析集群 登录华为云控制台，选择“大数据

查看更多 →

查询Hive数据 功能介绍 本小节介绍了如何使用HQL对数据进行查询分析。从本节中可以掌握如下查询分析方法。 SELECT查询的常用特性，如JOIN等。 加载数据进指定分区。 如何使用Hive自带函数。 如何使用自定义函数进行查询分析，如何创建、定义自定义函数请见开发Hive用户自定义函数。

查看更多 →

加载Hive数据 功能介绍 本小节介绍了如何使用HQL向已有的表employees_info中加载数据。从本节中可以掌握如何从集群中加载数据。 样例代码 -- 从本地文件系统/opt/hive_examples_data/目录下将employee_info.txt加载进employees_info表中

查看更多 →

toString(); 注：直连HiveServer时，若当前连接的HiveServer故障则会导致访问Hive失败；若使用ZooKeeper的访问Hive，只要有任一个HiveServer实例可正常提供服务即可。因此使用JDBC时建议通过ZooKeeper的方式访问Hive。 加载Hive JDBC驱动。

查看更多 →

典型场景：从关系型数据库导入数据到Hive 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到Hive。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的Hive表。 获取关系型数据库使用的用户和密码。 检查磁

查看更多 →

数据导入导出 介绍导入导出的相关参数。 raise_errors_if_no_files 参数说明：导入时是否区分“导入文件记录数为空”和“导入文件不存在”。raise_errors_if_no_files=TRUE，则“导入文件不存在”的时候， GaussDB 将抛出“文件不存在的”错误。

查看更多 →

导入元数据 功能介绍 导入数据表的元数据。若已有数据表的元数据，则可使用该功能快速根据元数据创建对象表。 URI POST AstroZero 域名 /u-route/baas/bulk/v1.0/import/schema?filename=X 表1 路径参数 参数 是否必选 参数类型

查看更多 →

导入元数据 准备元数据 从本地或OBS导入数据 父主题： 元数据操作

查看更多 →

增量导入数据 操作场景 图引擎服务在创建图完成后可以导入图数据，或者当您需要新增图数据时，可以利用“导入”功能进行增量导入。 当前仅支持 1.1.8 以上版本的图的增量导入功能。 为防止系统重启时，不能正常恢复导入图数据，建议在使用图期间，不要删除存储在OBS中的数据。 数据列的分隔符默认为逗号，暂不支持自定义。

查看更多 →

数据导入/导出 使用COPY FROM导入时报错“invalid byte sequence for encoding "UTF8": 0x00” GDS导入/导出类问题 创建GDS外表失败，提示不支持ROUNDROBIN 通过 CDM 将MySQL数据导入GaussDB(DWS)时出现字段超长，数据同步失败

查看更多 →

表示需要导入到哪个分区。 不配置表示动态导入整表数据，导入的数据需要包含分区列的数据； 如果导入时，配置所有分区信息，则表示导入数据到指定分区，导入的数据不能包含分区列的数据； 如果导入时，配置了部分分区信息，而导入的数据必须包含非指定的分区数据，不能包含指定的分区数据，否则数据

查看更多 →

数据导入导出 介绍导入导出的相关参数。 raise_errors_if_no_files 参数说明：导入时是否区分“导入文件记录数为空”和“导入文件不存在”。raise_errors_if_no_files=TRUE，则“导入文件不存在”的时候，GaussDB将抛出“文件不存在的”错误。

查看更多 →

导入并配置Hive样例工程 导入并配置Hive JDBC样例工程 导入并配置Hive HCatalog样例工程 导入并配置SpringBoot样例工程 配置Hive Python样例工程 配置Hive Python3样例工程 父主题： 准备Hive应用开发环境

查看更多 →

导入图数据 在创建图完成后可导入图数据，或者当您需要新增图数据时，可以利用“导入”功能进行增量导入。 操作步骤 在图管理页面，选择需要导入数据的图，在“操作”列选择“导入”。 在弹出的导入提示框中，填写以下数据： 首先单击元数据、边数据集和点数据集后的“下载模板”按钮，将下载的三个模板放入已有的OBS桶路径下。

查看更多 →

数据导入导出 介绍导入导出的相关参数。 raise_errors_if_no_files 参数说明：导入时是否区分“导入文件记录数为空”和“导入文件不存在”。raise_errors_if_no_files=TRUE，则“导入文件不存在”的时候，GaussDB将抛出“文件不存在的”错误。

查看更多 →

批量数据导入 Broker Load Stream Load 父主题： 数据导入

查看更多 →