文档首页/ 数据湖探索 DLI/ 最佳实践/ 最佳实践内容概览
更新时间:2025-09-18 GMT+08:00
分享

最佳实践内容概览

表1 DLI最佳实践

场景分类

方案

说明

安全最佳实践

DLI安全最佳实践

为了加强DLI服务的安全性,介绍加强权限管理、数据备份与恢复等安全配置的操作方法。

数据迁移至DLI

迁移Hive数据至DLI

介绍如何通过CDM数据同步功能,迁移MRS Hive数据至DLI。其他MRS Hadoop组件数据,均可以通过CDM与DLI进行双向同步。

迁移Kafka数据至DLI

介绍如何通过CDM数据同步功能,迁移MRS Kafka数据至DLI。

迁移Elasticsearch数据至DLI

介绍如何通过CDM数据同步功能,迁移Elasticsearch类型的CSS集群数据至DLI

迁移RDS数据至DLI

介绍如何通过CDM数据同步功能,迁移关系型数据库RDS数据至DLI。

迁移DWS数据至DLI

介绍如何通过CDM数据同步功能,迁移数据仓库服务DWS数据至DLI。

湖仓一体

使用LakeFormation元数据开发DLI作业

介绍使用LakeFormation元数据开发DLI作业的操作方法。

数据格式转换

使用DLI将CSV数据转换为Parquet数据

介绍使用DLI将CSV数据转换为Parquet数据的方法。

配置DLI网络连通

配置DLI与内网数据源的网络连通

介绍适用增强型跨源连接配置DLI与内网数据源的网络连通的操作指导。

配置DLI与公网网络连通

介绍如何通过设置SNAT规则和配置路由信息,实现DLI服务与公网的网络连接。

提交作业

在DataArts Studio开发DLI SQL作业

介绍在DataArts Studio开发DLI SQL作业的操作步骤。

在DataArts Studio开发DLI Spark作业

介绍获取Spark作业的演示JAR包,并在DataArts Studio控制台的数据开发模块中关联到此JAR包开发作业的操作步骤。

使用Notebook实例编写Spark作业

介绍使用Notebook实例提交DLI作业的操作指导。

使用Livy提交Spark Jar作业

介绍DLI Livy提交Spark作业的操作指导。

对接BI工具分析数据

配置DBeaver连接DLI进行数据查询和分析

介绍DBeaver连接DLI并提交SQL查询的操作步骤。

配置DBT连接DLI进行数据调度和分析

介绍使用DBT提交DLI作业的操作步骤。

配置Grafana连接DLI进行数据查询和分析

介绍Grafana连接DLI的操作步骤。

配置YongHong BI连接DLI进行数据查询和分析

介绍YongHong BI连接DLI的操作步骤。

配置Superset连接DLI进行数据查询和分析

介绍Superset连接DLI的操作步骤。

配置Power BI连接DLI进行数据查询和分析

介绍PowerBI连接DLI,访问和分析DLI中的数据的操作步骤。

配置Fine BI连接DLI进行数据查询和分析

介绍Fine BI连接DLI的操作步骤。

配置Tableau通过Kyuubi连接DLI进行数据查询和分析

介绍Tableau基于Kyuubi连接DLI的操作步骤。

配置Beeline通过Kyuubi连接DLI进行数据查询和分析

介绍Beeline基于Kyuubi连接DLI的操作步骤。

数据分析

使用DLI分析车联网场景驾驶行为数据

介绍使用DLI进行车联网场景驾驶行为数据分析的操作指导。

使用DLI分析电商BI报表

以某商城真实的用户、商品、评论数据(脱敏后)为基础,介绍使用DLI进行电商BI报表分析的方法。

使用DLI分析账单消费数据

以DLI实际消费数据为样例,介绍使用DLI进行账单分析和成本优化的措施。

使用DLI分析电商实时业务数据

介绍使用DLI Flink完成电商业务实时数据的分析处理的操作步骤。

相关文档