更新时间:2024-02-01 GMT+08:00

数据湖建设和持续运营

场景描述

数据湖建设和持续运营,是指数据湖的初始化建设及后续日常的海量元数据及权限管理,因此用户需要便捷高效的建设和管理方式。

传统方式的弊端

  • 仅支持通过计算引擎(Hive、Spark等)执行SQL实现元数据的定义、修改、查询,对用户有一定的技能要求,缺少提升易用性的可视化界面。
  • 一个完整的授权活动,需要针对计算引擎、对象存储执行两次授权操作,对用户操作带来不便,易用性差。

LakeFormation服务优势

  • 一站式可视化湖仓构建:提供数据湖元数据统一定义和授权的可视化界面,支持用户便捷操作,快速构建。
  • 联动授权:支持在元数据授权的同时,自动化完成元数据所映射的文件目录的授权,使用户授权操作更便捷和高效。
  • 细粒度访问控制:实现针对数据湖的库、表、列级元数据的细粒度访问控制,为业务数据的安全性提供有力保障。

建议搭配服务

MapReduce服务(MRS)

数据仓库服务 GaussDB(DWS)

数据治理中心 DataArts Studio

数据湖探索(DLI)

支持情况请咨询对应服务。