从OBS导入 CS V、TXT数据 创建访问密钥（AK和SK） 上传数据到OBS 创建OBS外表 执行导入数据 处理导入错误 OBS导入数据示例 父主题： 从OBS并行导入数据

查看更多 →

使用 DLI 可轻松将CSV格式数据转换为Parquet格式数据。 方案架构 将CSV格式的数据上传到 对象存储服务 OBS，使用DLI将CSV数据转换为Parquet数据，并将转换后的Parquet数据存储到OBS中。 图1 方案简介 流程指导 使用DLI将CSV数据转换为Parquet数据主要包括以下步骤：

查看更多 →

数据库导入 智慧教育数据中台、基础支撑平台（统一用户认证管理、数字校园统一信息门户、岗位角色管理、）、校园管理平台。 表1 数据库导入步骤 数据库导入步骤 命令 进入数据库创建目录、用户表空间和用户 sqlplus / as sysdba(下面依次输入以下命令后回车) > create

查看更多 →

单击资源清单后的“添加文件”，将导出的阿里云ECS实例资源清单上传。 实例资源清单上传后，单击云盘资源清单后的“添加文件”，将导出的阿里云ECS云盘资源清单上传。 Redis 单击资源清单后的“添加文件”，将导出的阿里云Redis实例资源清单上传。 对象存储 单击资源清单后的“添加文件”，将导出的阿里云OSS桶资源清单上传。

查看更多 →

单击资源清单后的“添加文件”，将导出的阿里云ECS实例资源清单上传。 实例资源清单上传后，单击云盘资源清单后的“添加文件”，将导出的阿里云ECS云盘资源清单上传。 Redis 单击资源清单后的“添加文件”，将导出的阿里云Redis实例资源清单上传。 对象存储 单击资源清单后的“添加文件”，将导出的阿里云OSS桶资源清单上传。

查看更多 →

数据映射 “数据映射”处理器用于将源端数据转换为目标端格式的数据。后续节点可通过payload方式引用数据映射处理器的输出数据。 配置参数 参数 说明 源端数据源 设置源端数据源，数据库类型的数据源在选择完表之后会自动显示字段信息，其他格式的数据源需要通过导入文件或者手动增加的形

查看更多 →

API获取OBS指定桶的对象列表，并将结果中的桶名称和对象名称通过数据映射，映射到MySql指定表中的相关字段，然后使用MySql添加记录的操作将桶名和对象名存储到MySql中。其中，对象存储服务 OBS产生的结果是数据映射的源端数据源，MySql是目的端数据源。可以通过使用Open API

查看更多 →

调用链中是否采集上报带有参数内容的原始sql 汇聚分表表名 array JAVA - 2.2.2 - 根据配置的表名，汇聚分表的sql。以该表名开头的表汇聚成同样的表名 mysql最大采集行数 integer JAVA 500 2.4.1 - 可采集的mysql最大行数 sql语句最大采集字节数

查看更多 →

数据库脚本导入 数据库脚本请联系伙伴提供 ulearningdb.sql 可以借用数据库管理工具，这里以Navicat为例： 连接数据库，启动Navicat后，单击左上角“连接”，选择“MySQL” 在如下的弹窗中填写相应的参数，然后单击测试连接，提示连接成功后单击确定 图1 新建连接1

查看更多 →

将Spark作业结果存储在MySQL数据库中，缺少pymysql模块，如何使用python脚本访问MySQL数据库？ 缺少pymysql模块，可以查看是否有对应的egg包，如果没有，在“程序包管理”页面上传pyFile。具体步骤参考如下： 将egg包上传到指定的OBS桶路径下。 登录DLI管理控制台，单击“数据管理

查看更多 →

，则在数据导入目标数据库的过程中，如果有SQL执行出错，系统将忽略执行错误，继续往下执行。 勾选“导入完成后删除上传的文件”时，则该文件导入目标数据库成功后，将从OBS桶中自动删除。该选项仅适用于本地上传的文件。 备注 自定义备注信息。 导入信息设置完成后，单击“创建导入任务”即可。

查看更多 →

--project -p 是 源项目名称。 --rename -r 否 重命名导入模板名称，不填时与源模板名称保持一致。 --current-project 无 否 指定项目名。未填写则使用配置文件中的项目名。 命令示例 本节以Windows为例介绍eihealth-toolki

查看更多 →

导入模板名称”中修改模板名称，单击“确定”。 图1 从其他项目导入模板 平台也提供了yaml格式的数据库模板，您可以在本地编辑完成后上传至平台进行使用，数据库模板支持yaml或yml格式，且文件大小不能超过10M。 导入方式选择“上传”，单击“下载示例文件”下载数据库模板示例，编辑后上传模板文件至平台，单击“确定”。

查看更多 →

(product_id); （可选）本例步骤1中没有创建索引，不用执行这一步。若目标表存在索引，在数据导入过程中，将增量更新索引信息，影响数据导入性能。建议在执行数据导入前，先删除目标表的索引。在数据导入完成后，再重新创建索引。 假定在导入表“product_info”上的“prod

查看更多 →

，则在数据导入目标数据库的过程中，如果有SQL执行出错，系统将忽略执行错误，继续往下执行。 勾选“导入完成后删除上传的文件”时，则该文件导入目标数据库成功后，将从OBS桶中自动删除。该选项仅适用于本地上传的文件。 备注 自定义备注信息。 导入信息设置完成后，单击“创建导入任务”即可。

查看更多 →

，则在数据导入目标数据库的过程中，如果有SQL执行出错，系统将忽略执行错误，继续往下执行。 勾选“导入完成后删除上传的文件”时，则该文件导入目标数据库成功后，将从OBS桶中自动删除。该选项仅适用于本地上传的文件。 备注 自定义备注信息。 导入信息设置完成后，单击“创建导入任务”即可。

查看更多 →

脏数据导致CSV数据类型问题插入MySQL报错 问题描述 客户作业失败，提示invalid utf-8 charater string '' 故障分析 根据报错，考虑用户数据中存在脏数据，个别字段类型不匹配导致。 解决方案 后台排查客户sqoop日志，考虑客户源端数据类型格式问题导致异常

查看更多 →

将Oracle数据库中的数据导入HDFS时各连接器的区别 问题 使用Loader将Oracle数据库中的数据导入到HDFS中时，可选择的连接器有generic-jdbc-connector、oracle-connector、oracle-partition-connector三种，要怎么选？有什么区别？

查看更多 →

异构型数据库之间由于格式不同，不支持直接导入导出。但只要导入导出的格式数据兼容，理论上，导入表数据也是可行的。 异构型数据库之间数据导入导出，一般需要使用Ugo或第三方软件，通过数据复制的方式来实现。比如，先使用工具从Oracle中，以文本的格式导出表记录，然后利用Load语句导入到云数据库 GaussDB (for

查看更多 →

将Oracle数据库中的数据导入HDFS时各连接器的区别 问题 使用Loader将Oracle数据库中的数据导入到HDFS中时，可选择的连接器有generic-jdbc-connector、oracle-connector、oracle-partition-connector三种，要怎么选？有什么区别？

查看更多 →

如何配置CSV数据来源？ CSV文件的第一行为表头，文件的每一行都是一个数据记录，每个记录由一个或多个字段组成，用逗号分隔。在配置数据源的时候，保留CSV的首行作为表头，并且每一个列的列名需要和相应图表中要求的数据结构的字段名保持一致。

查看更多 →