更新时间:2024-09-27 GMT+08:00

配置DLI读写外部数据源数据的操作流程

DLI执行作业需要读写外部数据源时需要具备两个条件:

  • 打通DLI和外部数据源之间的网络,确保DLI队列与数据源的网络连通。
  • 妥善保存数据源的访问凭证确保数据源认证的安全性,便于DLI安全访问数据源。

本节操作介绍配置DLI读写外部数据源数据操作流程。

  • 配置DLI与数据源网络连通:您可以参考配置DLI与数据源网络连通(增强型跨源连接)配置DLI与数据源的网络连通。
  • 管理DLI具数据源的访问凭证:
    • Spark 3.3.1及以上版本、Flink 1.15及以上版本的跨源访问场景
      • 推荐使用数据加密服务DEW来存储数据源的认证信息,为您解决数据安全、密钥安全、密钥管理复杂等问题。

        具体操作请参考使用DEW管理数据源访问凭证

      • 使用DEW管理数据源访问凭证时,您还需要创建DLI云服务委托授予DLI访问其他服务(DEW)读取访问凭证。
    • SQL作业、Flink 1.12版本的跨源访问场景,使用DLI提供的“跨源认证”管理数据源的访问凭证,具体操作请参考使用DLI的跨源认证管理数据源访问凭证