数据湖 探索 数据湖探索连接器用于对接华为云数据湖探索服务。 数据湖探索（Data Lake Insight，简称 DLI ）是完全兼容Apache Spark、Apache Flink、Trino生态，提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。 创建数据湖探索连接

查看更多 →

迁移元数据权限至LakeFormation 操作场景 用户在完成元数据迁移后，可以将对应元数据的权限迁移至LakeFormation，迁移成功后为元数据绑定的默认Owner将会拥有元数据的操作权限，从而保证用户在元数据迁移前后，数据访问控制策略的连续性与一致性。 当前支持迁移的权限策略类型如下：

查看更多 →

variable * - - dli:catalog:list 授予数据目录列表查询权限。 List - - - dli:catalog:bind 授予数据目录绑定权限。 Write - - - dli:catalog:get 授予数据目录详情查询权限。 Read - - - dli:queue:list

查看更多 →

variable * - - dli:catalog:list 授予数据目录列表查询权限。 List - - - dli:catalog:bind 授予数据目录绑定权限。 Write - - - dli:catalog:get 授予数据目录详情查询权限。 Read - - - dli:queue:list

查看更多 →

数据开发概述 数据开发是一个一站式的大数据协同开发平台，提供全托管的大数据调度能力。它可管理多种大数据服务，极大降低用户使用大数据的门槛，帮助您快速构建大数据处理中心。 数据开发模块曾被称为数据湖工厂（Data Lake Factory，后简称DLF）服务，因此在本文中，“数据湖

查看更多 →

多模态AI数据湖 多模态数据处理

查看更多 →

variable * - dli:catalog:list 授予数据目录列表查询权限。 list - - dli:catalog:bind 授予数据目录绑定权限。 write - - dli:catalog:get 授予数据目录详情查询权限。 read - - dli:queue:list

查看更多 →

无需将数据搬迁到统一的数据湖中，即可实现对不同数据源的元数据的管理和分析。 元数据同步：DLI提供的元数据管理功能确保元数据的实时性和一致性。 元数据查询与管理：DLI提供标准SQL接口，用户可以使用SQL语句查询和管理元数据。支持对元数据的增删改查操作，方便用户进行数据治理和分析。

查看更多 →

作为数据治理的一个核心模块，承担数据治理过程中的数据加工并业务化的功能，提供智能数据规划、自定义主题数据模型、统一数据标准、可视化数据建模、标注数据标签等功能，有利于改善数据质量，有效支撑经营决策。 数据开发 大数据开发环境，降低用户使用大数据的门槛，帮助用户快速构建大数据处理中心。支持数据建模、数据

查看更多 →

一站式可视化 湖仓构建 ：提供数据湖元数据统一定义和授权的可视化界面，支持用户便捷操作，快速构建。 联动授权：支持在元数据授权的同时，自动化完成元数据所映射的文件目录的授权，使用户授权操作更便捷和高效。 细粒度访问控制：实现针对数据湖的库、表、列级元数据的细粒度访问控制，为业务数据的安全性提供有力保障。

查看更多 →

SQL/Flink SQL，支持多种接入方式，并兼容主流数据格式。数据无需复杂的抽取、转换、加载，使用SQL或程序就可以对云上CloudTable、RDS、DWS、 CSS 、OBS、E CS 自建数据库以及线下数据库的异构数据进行探索。 产品介绍 图说DLI 立即使用 成长地图 由浅入深，带您玩转DLI

查看更多 →

图解数据湖探索

查看更多 →

存储在OBS中，实现元数据的统一管理、数据的集中存储和全生命周期管理。 当前支持迁移的数据源类型如下： DLF：第三方数据湖构建（Data Lake Formation，DLF） MRS 云数据库RDS(for MySQL) 开源HiveMetastore(for MySQL) MRS云数据库RDS(for

查看更多 →

境和开发环境数据湖服务的对应关系，在开发和生产流程中自动切换对应的数据湖。因此您需要在Serverless数据湖服务中准备两套队列、两套数据库资源，建议通过名称后缀进行区分，详细操作请参见配置 DataArts Studio 企业模式环境隔离。 配置DB，在同一个数据湖服务下配置两套数据库，进行开发与生产环境隔离。

查看更多 →

M集群请参考创建 CDM 集群进行创建），且待连接的数据湖与CDM集群之间网络互通。 如果数据湖为云下的数据库，则需要通过公网或者专线打通网络。请确保数据源所在的主机和CDM集群均能访问公网，并且防火墙规则已开放连接端口。 如果数据湖为云上服务（如DWS、MRS等），则网络互通需满足如下条件：

查看更多 →

配置数据湖探索连接器 数据湖探索连接器用于对接华为云数据湖探索服务。 数据湖探索（Data Lake Insight，简称DLI）是完全兼容Apache Spark、Apache Flink、Trino生态，提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。

查看更多 →

第二类工具，关注如何对湖中的数据进行分析、挖掘、利用。数据湖需要具备完善的数据管理能力、多样化的数据分析能力、全面的数据生命周期管理能力、安全的数据获取和数据发布能力。如果没有这些数据治理工具，元数据缺失，湖里的数据质量就没法保障，最终会由数据湖变质为数据沼泽。 随着大数据和AI的发展，数据湖中数据的

查看更多 →

Doris全面综合的性能表现也能在轻量化大数据场景中独立承担数据从加工到查询的全链路数据处理需求。 实时OLAP场景介绍 实时OLAP场景化方案如图1所示。 图1 实时OLAP场景 数据源：业务系统产生的数据，可以是离线的文件数据，关系型数据库数据，或者实时采集的流式数据等。 大数据平台：实时OLAP的

查看更多 →

API连接仅支持在数据开发组件使用，其他组件例如数据架构、数据质量、数据目录等无法使用此连接。 在数据开发组件不支持通过可视化方式查看与管理该连接下的数据库、数据表和字段。特别的，仅当连接MRS 3.2.1以及之后版本的MRS集群时，支持通过可视化方式查看数据库、数据表和字段，但仍不支持可视化方式管理。

查看更多 →

。 选择元数据管理，单击创建数据湖元数据同步任务按钮，右侧弹出创建任务-数据湖元数据同步窗口。 图1 创建数据湖元数据同步任务 根据表1，配置数据湖元数据同步任务参数。 表1 元数据同步任务参数配置说明 参数 配置说明 任务名称 默认创建名称为“数据湖元数据同步任务-4位随机数（字母和数字）”，也可以自定义名称。

查看更多 →

目录下有数据无法删除。 请先删除目录下数据。 400 DLF.6259 A resource with the same name already exists in the directory. 目录下已经存在同名的资源。 请检查目录下是否存在同名的资源。 400 DLF.6263

查看更多 →