更新时间:2023-12-14 GMT+08:00

自定义镜像概述

自定义镜像概述

DLI支持容器部署的集群。在容器集群中,Spark作业和Flink作业相关组件都运行在容器中,通过下载DLI提供的自定义镜像,可以改变Spark作业和Flink作业的容器运行环境。例如,在自定义镜像中加入机器学习相关的Python包或者C库,可以通过这种方式帮助用户实现功能扩展。

使用限制

  • 必须使用DLI 容器队列,且为专属队列。
  • 必须使用DLI提供的基础镜像。
  • 不能随意修改基础镜像中DLI相关组件及目录。
  • 当前仅支持Spark作业和Flink Jar作业。

使用流程

图1 自定义镜像使用流程