DWS数据连接参数说明
| 参数 | 是否必选 | 说明 |
|---|---|---|
| 数据连接类型 | 是 | DWS连接固定选择为数据仓库服务(DWS)。 |
| 数据连接名称 | 是 | 数据连接的名称,只能包含字母、数字、下划线和中划线,且长度不超过100个字符。 |
| 描述 | 否 | 为更好地识别数据连接,此处加以描述信息,长度不能超过100个字符。 |
| 标签 | 否 | 标识数据连接的属性。设置标签后,便于统一管理。 说明: 标签的名称,只能包含中文、英文字母、数字和下划线,不能以下划线开头,且长度不能超过100个字符。 |
| 适用组件 | 是 | 选择此连接适用的组件。勾选组件后,才能在相应组件内使用本连接。 说明:
|
| 基础与网络连通配置 | ||
| SSL加密 | 是 | DWS支持SSL通道加密和证书认证两种方式进行客户端与服务器端的通信。您可以通过服务器端是否强制使用SSL连接进行设置。
|
| 手动 | 是 | 选择连接模式。
|
| DWS集群名 | 是 | “手动”选择为“集群名模式”时需要配置本参数。 选择DWS集群,系统会显示所有项目ID和企业项目相同的DWS集群。 说明: 建议选择英文集群名,选择中文集群名将会导致创建数据连接失败。 |
| JDBC连接IP或域名 | 否 | “手动”选择为“集群名模式”时需要配置本参数。 下拉选择DWS ELB域名或ELB IP,建议优先配置DWS ELB域名,如果DWS不支持则配置ELB IP。 |
| IP或域名 | 是 | “手动”选择为“连接串模式”时需要配置本参数。 表示通过内部网络访问集群数据库的访问地址,可填写为IP或域名。内网访问IP或域名地址在创建集群时自动生成,您可以通过管理控制台获取访问地址:
|
| 端口 | 是 | “手动”选择为“连接串模式”时需要配置本参数。 表示创建DWS集群时指定的数据库端口号。请确保您已在安全组规则中开放此端口,以便DataArts Studio实例可以通过该端口连接DWS集群数据库。 |
| KMS加密密钥 | 是 | 通过KMS加解密数据源认证信息,选择KMS中的任一默认密钥或自定义密钥即可。 说明:
|
| 绑定Agent | 是 | DWS为非全托管服务,DataArts Studio无法直接与非全托管服务进行连接。CDM集群提供了DataArts Studio与非全托管服务通信的代理,所以创建DWS的数据连接时,请选择一个CDM集群。如果没有可用的CDM集群,请参考创建CDM集群进行创建。 CDM集群作为网络代理,必须和DWS集群网络互通才可以成功创建DWS连接,为确保两者网络互通,CDM集群必须和DWS集群处于相同的区域、可用区,且使用同一个VPC和子网,安全组规则需允许两者网络互通。 说明: CDM集群作为管理中心数据连接Agent时,单集群的并发活动线程最大为200。即当多个数据连接共用同一Agent时,通过这些数据连接提交SQL脚本、Shell脚本、Python脚本等任务的同时运行上限为200,超出的任务将排队等待。建议您按照业务量情况规划多个Agent分担压力。 |
| 数据源认证及其他功能配置 | ||
| 用户名 | 是 | 数据库的用户名,创建DWS集群时指定的用户名。 |
| 密码 | 是 | 数据库的访问密码,创建DWS集群时指定的密码。 |
| 元数据实时同步 | 是 | 打开元数据实时同步开关后,连接的DWS集群元数据会实时同步到数据地图组件,推荐开启。 说明:
|
| 元数据采集范围 | 否 | 配置元数据实时同步的数据库和数据表范围,不填写默认不筛选。 可填写为如下两种形式之一:
例如:
|
| 数据集成配置 | ||
| 数据库名称 | 是 | 适用组件勾选数据集成后,呈现此参数。 配置为要连接的数据库名称。 |
| 单次请求行数 | 否 | 适用组件勾选数据集成后,呈现此参数。 指定每次请求获取的行数,根据数据源端和作业数据规模的大小配置该参数。如果配置过大或过小,可能影响作业的时长。 |
| 连接属性 | 否 | 适用组件勾选数据集成后,呈现此参数。 可选参数,自定义连接属性,单击“添加”可增加多个属性。 常见配置举例如下: connectTimeout=60与socketTimeout=300:迁移数据量较大、或通过查询语句检索全表时,会由于连接超时导致迁移失败。此时可自定义连接超时时间与socket超时时间(单位秒),避免超时导致失败。 说明: 在DWS连接数据库服务器时,如果配置了多个IP地址且开启了SSL加密,那么需要在连接属性中增加sslmode=require,否则会导致连接失败并报错。 |
| 引用符号 | 否 | 适用组件勾选数据集成后,呈现此参数。 可选参数,连接引用表名或列名时的分隔符号,参考对应数据库的产品文档进行配置。 |