更新时间:2024-12-25 GMT+08:00
分享

DLI Hudi元数据

DLI Hudi元数据说明

创建Hudi表时会在元数据仓创建表的相关元数据信息。

Hudi支持对接DLI元数据和Lakeformation元数据(仅Spark 3.3.1及以上版本支持对接Lakeformation元数据),对接方式与Spark一致。

  • DLI元数据可在数据湖探索管理控制台的“数据管理 > 库表管理”中查看。
  • Lakeformation元数据可在湖仓构建Lakeformation服务的管理控制台中查看。

相关操作

  • DLI SQL队列对接DLI元数据方法:
    1. 在DLI管理控制台的SQL编辑器页面的“数据目录”中选择“dli”。
    2. 在“数据库”选项中选择要对接的DLI元数据中的数据库,即可对接到DLI元数据。
  • DLI通用队列对接DLI元数据方法:

    请参考使用Spark作业访问DLI元数据

  • DLI SQL队列对接Lakeformation元数据方法:

    参考DLI对接LakeFormation

  • DLI通用队列对接Lakeformation元数据方法:

    参考DLI对接LakeFormation

  • DLI元数据权限管理

    可通过DLI SQL权限管理或者IAM鉴权管理DLI元数据的权限

    • DLI SQL权限管理:
      1. 在“数据湖探索 > 数据管理 > 库表管理”页面,搜索要授权的库/表。
      2. 单击表操作列的“权限管理”,即可查看当前库/表授权信息或者新增授权。

        更多信息请参考在DLI控制台管理数据库资源

    • IAM鉴权:

      参考权限管理概述章节中的“IAM鉴权使用场景”。

  • Lakeformation元数据权限管理

    参考DLI对接LakeFormation

相关文档