None 服务介绍 数据湖探索 DLI 介绍什么是 数据湖 探索 02:47 数据湖探索DLI产品介绍 功能介绍 数据湖探索 DLI 熟悉数据湖探索控制台 03:10 数据湖探索控制台介绍 操作指导 数据湖探索 DLI 介绍怎样创建提交SQL作业 07:36 数据湖探索SQL作业入门指导

查看更多 →

list - - dli:catalog:bind 授予数据目录绑定权限。 write - - dli:catalog:get 授予数据目录详情查询权限。 read - - dli:queue:list 授予队列列表查询权限。 list queue * - - g:RequestTag/<tag-key>

查看更多 →

MySQ L实例 ，用于存储统计的驾驶行为数据。 创建数据湖探索 DLI增强型跨源队列，并创建SQL作业，用于分析和处理驾驶行为数据。 创建数据湖探索 DLI跨源认证，用于DLI访问RDS for MySQL同步写入驾驶行为数据。 创建两个对象存储服务 OBS桶，一个用于用户上传驾驶行为数据，另一个用于上传连接RDS的SQL文件。

查看更多 →

Trino（原PrestoSQL）是提供交互式查询分析能力的开源分布式SQL查询引擎，具备高性能、低延迟的查询处理能力，支持在大规模数据存储中进行数据查询和分析。 DLI服务架构：Serverless DLI是无服务器化的大数据查询分析服务，其优势在于： 按量计费：真正的按使用量（扫

查看更多 →

SQL，支持多种接入方式，并兼容主流数据格式。数据无需复杂的抽取、转换、加载，使用SQL或程序就可以对云上CloudTable、RDS、DWS、 CSS 、OBS、E CS 自建数据库以及线下数据库的异构数据进行探索。 产品介绍 图说DLI 立即使用 成长地图 由浅入深，带您玩转DLI 01 了解 初步认识华为云数据

查看更多 →

数据湖分析 多源数据目录 父主题： Doris应用开发指导

查看更多 →

该Catalog创建数据库“default”（固定名称，不可自定义），数据库内包含两个数据表“table_A”、“table_B”，并进行授权。 创建存储元数据的OBS路径 登录管理控制台。 在页面左上角单击，选择“存储 > 对象存储服务”，进入对象存储服务页面。 选择“并行文件系统

查看更多 →

elarts服务提供并收费。在使用推荐系统之前，您需要开通数据湖探索（Data Lake Insight，简称DLI）来创建集群。 DLI服务 登录华为云。在华为云“产品”页签，选择“大数据>数据湖探索DLI”，进入DLI产品页。单击“进入控制台”，授权开始使用DLI。 ModelArts服务

查看更多 →

租户管理员。 操作权限：具有所有云服务的管理和使用权限。创建后，可通过ACL赋权给其他子用户使用。 作用范围：项目级服务。 系统角色 DLI Service Administrator DLI服务管理员。 操作权限：具有数据湖探索服务队列、数据的管理和使用权限。创建后，可通过ACL赋权给其他子用户使用。

查看更多 →

DLV 大屏，快速定制数据大屏，将RDS中分析结果数据展示在大屏中。 方案优势 跨源分析 数据免搬迁，就可以关联分析存在OBS中的各个渠道的销售汇总数据。 纯SQL操作 DLI已对接多个数据源，直接通过SQL建表就可以完成数据源的映射。 一键部署 一键轻松部署，即可完成Kafka及DLI等资源发

查看更多 →

在OBS桶中，新建文件夹dli_order，并将下载好的数据文件上传到dli_order目录下。 回到DLI管理控制台，左侧导航单击“SQL编辑器”，队列选择“dli_dws”，数据库选择“deafult”，执行以下命令创建名为“dli_data”的数据库。 1 CREATE DATABASE

查看更多 →

建用户，通过授予仅能使用DLI，但是不允许删除DLI的权限策略，控制他们对DLI资源的使用范围。 如果账号已经能满足您的需求，不需要创建独立的IAM用户进行权限管理，您可以跳过本章节，不影响您使用DLI服务的其他功能。 IAM是华为云提供权限管理的基础服务，无需付费即可使用，您只

查看更多 →

Administrator）账号，用于管理和使用华为云的各个服务。因为“大数据平台组”需要使用DLI进行数据分析，所有“基础平台组组长”增加了一个权限为“DLI服务管理员”（DLI Service Administrator）的子账号用于管理和使用DLI服务。“基础平台组组长”按照公司两个业务对于数据分析的要求，创

查看更多 →

Service，简称OBS）存储RES的推荐数据源，实现安全、高可靠和低成本的存储需求。OBS的更多信息请参见《对象存储服务文档》。 数据接入服务 数据接入服务（Data Ingestion Service，简称DIS）提供推荐数据源的实时日志。DIS的更多信息请参见《数据接入服务文档》。

查看更多 →

DLI 操作场景 基于数据湖探索（Data Lake Insight，简称DLI）服务的数据集。 前提条件 连接的数据源已创建，如何创建请参见DLI数据源。 在DLI构建数据 登录DLI服务控制台。 参考创建并提交Spark SQL作业中操作，创建队列、数据库和表。 例如，创建了

查看更多 →

，无法购买DLI队列（假设当前权限仅包含DLI ReadOnlyAccess），表示“DLI ReadOnlyAccess”已生效。 在“服务列表”中选择除数据湖探索外（假设当前策略仅包含DLI ReadOnlyAccess）的任一服务，如果提示权限不足，表示“DLI ReadOnlyAccess”已生效。

查看更多 →

使用DLI进行账单分析与优化 应用场景 本文主要介绍如何使用华为云DLI上的实际消费数据（文中涉及账户的信息已脱敏），在DLI的大数据分析平台上进行分析，找出费用优化的空间，并给出使用DLI过程中降低成本的一些优化措施。 流程介绍 使用DLI进行账单分析与优化的操作过程主要包括以下步骤：

查看更多 →

该解决方案会部署如下资源： 数据迁移服务 CDM ：高效、易用的批量/增量数据迁移和同步服务，提供了40+数据源到数据湖仓的集成能力； 数据治理中心 DataArts Studio ：提供数据标准和数据模型的规范设计，以及数据分析流程的在线开发、任务编排调度等的一站式数据治理能力； 数据湖探索服务 DLI

查看更多 →

Service，简称OBS）存储RES的推荐数据源，实现安全、高可靠和低成本的存储需求。OBS的更多信息请参见《对象存储服务文档》。 数据接入服务 数据接入服务（Data Ingestion Service，简称DIS）提供推荐数据源的实时日志。DIS的更多信息请参见《数据接入服务文档》。

查看更多 →

SDK提供的接口函数即可实现使用提交DLI SQL和DLI Spark作业。 DLI支持的SDK分为SDK V3和DLI服务自行开发的SDK。 （推荐）DLI SDK V3：是根据定义API的YAML文件统一自动生成，其接口参数与服务的API一致。 具体操作请参考SDK V3版本开发指南。 DLI SDK（

查看更多 →

资源包仅提供托管服务，不提供下载功能。 如何使用API通过公网访问DLI？ DLI 域名 公网访问请使用域名访问：dli.{regionid}.myhuaweicloud.com 数据湖探索的终端节点请参考终端节点。 数据湖探索API请参考：数据湖探索API。 DLI自定义的Spark3

查看更多 →