增强型跨源连接概述
为什么要创建增强型跨源连接?
DLI跨源分析场景连接外部数据源时,由于数据源的VPC与DLI VPC不同,网络无法连通,导致DLI无法读取数据源数据。DLI提供的增强型跨源连接功能可以实现DLI与数据源的网络连通。
本节操作为您介绍跨VPC的数据源网络连通方案:
- 创建增强型跨源连接:采用对等连接的方式打通DLI与数据源的VPC网络。
- 测试网络连通性:验证队列与数据源网络连通性。
目前DLI支持跨源访问的数据源请参考DLI常用跨源分析开发方式。
在跨源开发场景中直接配置跨源认证信息存在密码泄露的风险,Spark 3.3.1及以上版本、Flink 1.15及以上版本的跨源访问场景推荐使用数据加密服务DEW来存储数据源的认证信息,为您解决数据安全、密钥安全、密钥管理复杂等问题。具体操作请参考使用DEW管理数据源访问凭证。
约束和限制
限制项 |
说明 |
---|---|
适用场景约束限制 |
|
权限要求 |
|
使用约束限制 |
|
检测连通性要求 |
|
DLI跨源分析流程
使用DLI进行跨源分析,需要先建立跨源连接,打通DLI和数据源的网络,再开发不同的作业访问数据源。
相关链接
创建方式 |
增强型跨源连接 |
---|---|
管理控制台操作 |
|
API接口 |