Rest Client数据源

使用前准备及限制

网络要求

Rest Client数据源必须与CDM网络进行通讯，以确保数据传输的顺畅性。详情请参见网络打通。

支持的迁移场景

数据集成离线同步支持以下三种同步方式，以满足不同数据迁移场景的需求：

• 单表同步

  适用于数据入湖和数据上云场景下，表或文件级别的数据同步。支持的数据源类型请参考单表支持的数据源类型。

• 分库分表同步

  适用于数据入湖和数据上云场景下，多库多表同步场景。支持的数据源类型请参考分库分表同步支持的数据源类型。

• 整库迁移

  适用于数据入湖和数据上云场景下，离线或自建数据库整体同步场景。支持的数据源类型请参考整库同步支持的数据源类型。

需要注意的是，分库分表与整库迁移能力会根据不同region的上线支持情况有所不同，具体支持情况以页面为准。以下是针对Rest Client的支持迁移场景概览：

核心能力速览

• 连接配置

  配置项	支持情况	说明
  支持请求类型	GET POST	支持两种最常见的 HTTP 请求类型。
  认证类型	NONE BASIC_AUTH TOKEN_AUTH OAUTH_CODE_GRANT	NONE：无认证。 BASIC_AUTH：基础验证。 如果数据源API支持用户名和密码的方式进行验证，您可选择此种验证方式，并在选择完成后配置用于验证的用户名和密码，后续数据集成过程中对接数据源时，通过Basic Auth协议传递给RESTful地址，完成验证。格式：{"Authorization":"Basic base64(username:password)"} TOKEN_AUTH：Token验证（token为静态token，永不过期，否则token过期会导致作业失败）。 如果数据源API支持Token的方式进行验证，您可选择此种验证方式，并在选择完成后配置用于验证的固定Token值，后续数据集成过程中对接数据源时，通过传入header中进行验证，格式：{"Authorization":"Bearer <token>"}。 OAUTH_CODE_GRANT Oauth 2.0（Authorization Code）：Oauth2.0认证。 Oauth2.0授权码模式，使用账号密码换取accessToken，再使用获取的accessToken访问接口。

• 读取能力

  配置项	支持情况	说明
  增量读取	√	支持通过修改url或body条件进行增量读取能力。
  并发读取	√	支持通过page分页做水平分片，多线程并行抽取，显著提升吞吐效率。
  json嵌套解析	√	支持解析响应体的JSON数据结构，能够正确处理包含多层嵌套字段的JSON数据，确保数据的完整性和准确性。

创建数据源

在DataArts Studio管理中心新建相应的数据源，详情请参见创建DataArts Studio数据连接。

创建数据集成离线作业

在DataArts Studio数据开发中新建Rest Client集成作业，详情请参见新建离线处理集成作业。