使用Loader从SFTP 服务器 导入数据到HDFS/OBS 操作场景 该任务指导用户使用Loader将数据从SFTP服务器导入到HDFS/OBS。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。 获取SFTP

查看更多 →

forName(HIVE_DRIVER); 获取JDBC连接，确认HQL的类型（DDL/DML），调用对应的接口执行HQL，输出查询的列名和结果到控制台，关闭JDBC连接。 Connection connection = null; try { // 获取JDBC连接

查看更多 →

forName(HIVE_DRIVER); 获取JDBC连接，确认HQL的类型（DDL/DML），调用对应的接口执行HQL，输出查询的列名和结果到控制台，关闭JDBC连接。 Connection connection = null; try { // 获取JDBC连接

查看更多 →

然后在本地进行Commit，将更新提交到本地仓库。 最后将服务器端的更新Pull到本地仓库进行合并，最后将合并好的本地仓库推送到服务器端，即进行一次远程提交。 如果非首次提交： 首先将修改的代码Commit更新到本地仓库。 然后将服务器端的更新Pull到本地仓库进行合并，最后将合并好的本地仓库推送到服务器端。

查看更多 →

使用Loader从HDFS/OBS导出数据到SFTP服务器 操作场景 该任务指导用户使用Loader将数据从HDFS/OBS导出到SFTP服务器。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。 获取SFTP服务器使用的用户

查看更多 →

下载数据集到本地 功能介绍 下载数据集到本地。 URI URI格式 GET softcomai/datalake/v1.0/download/local/download/datasetId={datasetId} 参数说明 参数名 是否必选 参数类型 备注 datasetId 是

查看更多 →

下载数据集到OBS 当用户订阅或申请订阅了数据集且该订阅申请已审批通过，用户可以手动将数据集下载到OBS。 已成功订阅的数据集在有效期内可以多次下载，无需再发起订阅流程。 数据集订阅成功后，数据集中数据有变化时详细介绍请参见消息提醒介绍。 订阅的数据集审批完成后，系统提供自动下载

查看更多 →

使用 CDM 上传数据到OBS 上传存量数据 上传增量数据 父主题： 案例：贸易数据统计与分析

查看更多 →

教程：导出ORC数据到 MRS GaussDB (DWS)数据库支持通过HDFS外表导出ORC格式数据至MRS，通过外表设置的导出模式、导出数据格式等信息来指定导出的数据文件，利用多DN并行的方式，将数据从GaussDB(DWS)数据库导出到外部，存放在HDFS文件系统上，从而提高整体导出性能。

查看更多 →

加载数据到Hive表中 功能介绍 本小节介绍了如何使用HQL向已有的表employees_info中加载数据。从本节中可以掌握如何从本地文件系统、MRS集群中加载数据。以关键字LOCAL区分数据源是否来自本地。 在启用了安全服务的集群中执行如下操作，需要在数据库中具有UPDATE

查看更多 →

从MRS导入数据到集群 从MRS导入数据概述 MRS集群上的数据准备 手动创建外部服务器 创建外表 执行数据导入 清除资源 错误处理 父主题： 导入数据

查看更多 →

使用CDM上传数据到OBS 上传存量数据 上传增量数据 父主题： 案例：贸易数据统计与分析

查看更多 →

加载数据到Hive表中 功能介绍 本小节介绍了如何使用HQL向已有的表employees_info中加载数据。从本节中可以掌握如何从本地文件系统、MRS集群中加载数据。以关键字LOCAL区分数据源是否来自本地。 在启用了安全服务的集群中执行如下操作，需要在数据库中具有UPDATE

查看更多 →

下载数据集到OBS 功能介绍 下载数据集到OBS桶中。 URI URI格式 POST /softcomai/datalake/v1.0/download/obs 参数说明 无。 请求 请求样例 POST https://endpoint/softcomai/datalake/v1

查看更多 →

下载数据集到OBS 功能介绍 下载数据集到OBS桶中。 URI URI格式 POST /softcomai/datalake/v1.0/download/obs 参数说明 无。 请求 请求样例 POST https://endpoint/softcomai/datalake/v1

查看更多 →

forName(HIVE_DRIVER); 获取JDBC连接，确认HQL的类型（DDL/DML），调用对应的接口执行HQL，输出查询的列名和结果到控制台，关闭JDBC连接。 Connection connection = null; try { // 获取JDBC连接

查看更多 →

下载数据集到OBS 当用户订阅或申请订阅了数据集且该订阅申请已审批通过，用户可以手动将数据集下载到OBS。 已成功订阅的数据集在有效期内可以多次下载，无需再发起订阅流程。 数据集订阅成功后，数据集中数据有变化时详细介绍请参见数据服务首页介绍。 同租户下载到OBS不需要审批，跨租户

查看更多 →

下载数据集到本地 父主题： 下载数据集

查看更多 →

步骤3：发送数据到DIS 功能简介 将用户本地数据通过DIS通道不断上传至DIS服务。 目前数据支持存储至DIS和 对象存储服务 （Object Storage Service，简称OBS） MapReduce服务 （MapReduce Service,简称MRS）、数据仓库服务（Data

查看更多 →

步骤3：发送数据到DIS 功能简介 将用户本地数据通过DIS通道不断上传至DIS服务。 目前数据支持存储至DIS和对象存储服务（Object Storage Service，简称OBS）MapReduce服务（MapReduce Service,简称MRS）、数据仓库服务（Data

查看更多 →

Load数据到Hive表失败 问题背景与现象 用户在建表成功后，通过Load命令往此表导入数据，但导入操作中遇到如下问题： ....... > LOAD DATA INPATH '/user/tester1/hive-data/data.txt' INTO TABLE employees_info;

查看更多 →