更新时间:2023-12-14 GMT+08:00
自定义镜像概述
自定义镜像概述
DLI支持容器部署的集群。在容器集群中,Spark作业和Flink作业相关组件都运行在容器中,通过下载DLI提供的自定义镜像,可以改变Spark作业和Flink作业的容器运行环境。例如,在自定义镜像中加入机器学习相关的Python包或者C库,可以通过这种方式帮助用户实现功能扩展。
使用限制
- 必须使用DLI 容器队列,且为专属队列。
- 必须使用DLI提供的基础镜像。
- 不能随意修改基础镜像中DLI相关组件及目录。
- 当前仅支持Spark作业和Flink Jar作业。
使用流程
图1 自定义镜像使用流程
父主题: 自定义镜像