概述

标准Spark SQL和LakeFormation原生支持对表结构（Database、Table、View）的管理，但缺乏对原始文件目录的安全、原生抽象。标准Spark无法对原始目录路径应用基于SQL的访问控制列表（ACL），这迫使用户为不同用户组管理复杂的、特定于云的IAM角色。

LakeFormation支持的Dataset是一种可用于管理原始文件目录的实体。

Dataset支持三级命名空间，格式为catalog.schema.dataset。

支持对Dataset执行DDL命令（CREATE DATASET、DESCRIBE DATASET、DROP DATASET、ALTER DATASET、SHOW DATASETS和COMMENT ON DATASET）

支持查询Dataset位置内的文件。

支持对Dataset执行DCL命令，包括GRANT、REVOKE和SHOW GRANTS。