更新时间:2026-11-13 GMT+08:00
通过共享链接查看Spark UI
当现场运维、支撑等人员没有平台账号,但需要查看Spark作业的运行界面以配合问题定位时,您可以将作业的Spark UI以共享链接的形式分享给他们。接收方收到链接后,无需登录平台账号、无需具备任何平台权限,直接在浏览器中打开即可只读浏览该作业的Spark UI。
使用须知
- 分享方已登录AI DataLake管理控制台,且对目标作业具备可见权限。目标作业须至少进入过运行状态(含运行中、已完成、已失败)。未启动或提交即终止的作业不支持分享。
- 接收方无需平台账号;所用浏览器需能访问AI DataLake控制台的公网地址。打开链接后无需登录,可只读浏览该作业的Spark UI并下载作业日志,不能进行任何写操作;链接仅对单个作业有效。
- 链接有效期默认7天,目前不支持提前作废,请仅在必要时生成并定向发送给指定人员。如需紧急撤销,请联系平台管理员禁用该作业的共享功能。
- 链接即访问凭证,请妥善保管,仅发给需要查看的人员。
- 通过共享链接查看已结束作业的历史UI时,系统会在端点上启动一个历史UI服务作业(SHS)来加载Spark UI。此时需要注意如下:
- SparkSql作业:需在端点上预先配置参数spark.aidatalake.sparkui.shared.shs.endpoint指定承载SHS的SparkJob端点,且该端点须处于运行中。若未配置该参数或指定端点不可用,将无法查看已结束作业的历史UI。
- SparkJob作业:SHS作业启动在该作业所在的端点上,需保证该端点处于运行中。
操作步骤
- 分享方获取并复制共享链接。
- 调用ShowSparkSql或ShowSparkJob接口。
- 在spark_ui字段下面查看shared_url共享链接和expired_at过期时间。
- 接收方打开共享链接查看。
收到分享方发送的共享链接后,在浏览器中打开该链接。
无需登录平台账号,页面加载完成后即可只读浏览该作业的Spark UI,包含作业视图、阶段视图、SQL执行详情等信息。
相关文档
查看Spark UI:可查看如何登录控制台自行查看运行中或已完成作业的Spark UI。