试。 图9 连通性测试 图10 dws联通测试 选择“作业管理>Flink作业”中创建作业 图11 创建Flink作业 单击“编辑”， 在作业详情中编写SQL语句，详情请参考从Kafka读取数据写入到DWS。 图12 配置Flink作业 配置完Flink作业后，启动作业，完成Flink配置。

查看更多 →

典型场景：从Hive导出数据到S FTP服务器 操作场景 该任务指导用户使用Loader将数据从Hive导出到SFTP 服务器 。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业中指定的Hive表的权限。 获取SFTP服务器使用的用户和密码，

查看更多 →

使用Loader从HDFS/OBS导入数据到HBase 操作场景 该任务指导用户使用Loader将文件从HDFS/OBS导入到HBase。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。 确保用户已

查看更多 →

使用Loader从HDFS导出数据到ClickHouse 本章节适用于 MRS 3.3.0及以后版本。 操作场景 该任务指导用户使用Loader将文件从HDFS导出到ClickHouse。 前提条件 在 FusionInsight Manager创建一个角色，添加ClickHouse

查看更多 →

使用Loader从HDFS导入数据到ClickHouse 操作场景 该任务指导用户使用Loader将文件从HDFS导入到ClickHouse。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS目录和数据。 ClickH

查看更多 →

MySQL、云数据库 PostgreSQL、云数据库 SQL Server。 文档数据库服务 CDM 支持从文档数据库服务（Document Database Service，简称DDS）导出数据，暂不支持导入数据到DDS。 云搜索服务 CDM支持从 云搜索 服务（Cloud Search S

查看更多 →

Connect，简称DC）打通与第三方数据中心的网络通信。 API网关服务 DataArts Studio 通过API网关服务（API Gateway，简称APIG）对外开放各组件的API接口。另外，数据服务共享版需要将生成的API发布到APIG。 数据湖 探索服务 DataArts Studio支持将数据湖探索服务（Data

查看更多 →

典型场景：从关系型数据库导入数据到HBase 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到HBase。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HBase表或phoenix表。 获取关系型数据库使用的用户和密码。

查看更多 →

典型场景：从HDFS/OBS导出数据到SFTP服务器 操作场景 该任务指导用户使用Loader将数据从HDFS/OBS导出到SFTP服务器。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。 获取S

查看更多 →

数据存储、大数据计算分析引擎等数据底座，帮助企业快速构建从数据接入到数据分析的端到端智能数据系统，消除数据孤岛，统一数据标准，加快数据变现，实现数字化转型。 产品架构如图1所示。 图1 产品架构 如图所示，DataArts Studio基于数据湖底座，提供数据集成、开发、治理等能力。DataArts

查看更多 →

下载数据集到本地 功能介绍 下载数据集到本地。 URI URI格式 GET softcomai/datalake/v1.0/download/local/download/datasetId={datasetId} 参数说明 参数名 是否必选 参数类型 备注 datasetId 是

查看更多 →

下载数据集到OBS 当用户订阅或申请订阅了数据集且该订阅申请已审批通过，用户可以手动将数据集下载到OBS。 已成功订阅的数据集在有效期内可以多次下载，无需再发起订阅流程。 数据集订阅成功后，数据集中数据有变化时详细介绍请参见消息提醒介绍。 订阅的数据集审批完成后，系统提供自动下载

查看更多 →

使用CDM上传数据到OBS 上传存量数据 上传增量数据 父主题： 案例：贸易数据统计与分析

查看更多 →

教程：导出ORC数据到MRS GaussDB (DWS)数据库支持通过HDFS外表导出ORC格式数据至MRS，通过外表设置的导出模式、导出数据格式等信息来指定导出的数据文件，利用多DN并行的方式，将数据从GaussDB(DWS)数据库导出到外部，存放在HDFS文件系统上，从而提高整体导出性能。

查看更多 →

使用CDM上传数据到OBS 上传存量数据 上传增量数据 父主题： 案例：贸易数据统计与分析

查看更多 →

表示通过内部网络访问集群数据库的访问地址，可填写为IP或 域名 。内网访问IP或域名地址在创建集群时自动生成，您可以通过管理控制台获取访问地址： 根据注册的账号登录DWS云服务管理控制台。 从左侧列表选择实例管理。 单击某一个实例名称，进入实例基本信息页面。在连接信息标签中可以获取到内网IP、域名和端口等信息。

查看更多 →

从MySQL CDC源表读取数据写入到DWS 本指导仅适用于Flink 1.12版本。 场景描述 CDC是变更数据捕获（Change Data Capture）技术的缩写，它可以将源数据库的增量变动记录，同步到一个或多个数据目的中。CDC在数据同步过程中，还可以对数据进行一定的处理，例如分组（GROUP

查看更多 →

、部署架构、数据量和性能等）。 在华为云提供实施服务的过程中，如客户提供的资料中含有第三方软件，客户须负责与第三方厂商交涉，协助华为云解决问题。 授权华为团队与迁移相关的操作权限。 华为责任 华为需明确此次迁移项目负责人。 对于项目所必须获取的客户相关业务架构、数据等信息，华为得

查看更多 →

典型场景：从关系型数据库导入数据到HDFS/OBS 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到HDFS/OBS。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。 获取关系型数据库使用的用户和密码。

查看更多 →

典型场景：从关系型数据库导入数据到ClickHouse 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到ClickHouse，本章节已MySQL为例进行操作。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 ClickHouse表已创建，确保

查看更多 →

下载数据集到OBS 功能介绍 下载数据集到OBS桶中。 URI URI格式 POST /softcomai/datalake/v1.0/download/obs 参数说明 无。 请求 请求样例 POST https://endpoint/softcomai/datalake/v1

查看更多 →