String 必填 子网ID，该模板使用已有子网，该解决方案创建的 数据湖探索 DLI 队列所在网段默认172.16.0.0/16，请确保所选子网网段不与DLI队列网段重合。该方案所涉及到的其他云服务资源将会部署在该子网下，查询子网ID请参考获取子网ID。 空 secgroup_name如果

查看更多 →

DLI如何进行队列异常监控？ DLI为用户提供了作业失败的topic订阅功能。 登录DLI控制台。 单击左侧“队列管理”，进入队列管理页面。 在队列管理页面，单击左上角“创建消息通知主题”进行配置。详细操作请参考《 数据湖 探索用户指南》。 父主题： 使用咨询

查看更多 →

问控制，为业务数据的安全性提供有力保障。 建议搭配服务 MapReduce服务（ MRS ） 数据仓库服务 GaussDB （DWS） 数据治理中心 DataArts Studio 数据湖探索（DLI） 支持情况请咨询对应服务。 父主题： 应用场景

查看更多 →

本实践通过DataArts Studio服务的数据开发DLF组件和数据湖探索服务（DLI）对某电商商城的用户、商品、评论数据（脱敏后）进行分析，输出用户和商品的各种数据特征，可为营销决策、广告推荐、信用评级、品牌监控、用户行为预测提供高质量的信息。在此期间，您可以学习到数据开发模块脚本编辑、作业编

查看更多 →

'krb5conf'='./krb5.conf','keytab'='./user.keytab','principal'='krbtest') "); 与未开启kerberos认证相比，开启了kerberos认证需要多设置三个参数，如表1所示。 表1 参数说明 参数名称与参数值 参数说明

查看更多 →

将写好的python代码文件上传至DLI中。控制台操作请参考《数据湖探索用户指南》。API操作请参考《数据湖探索API参考》>《上传资源包》。 在Spark作业编辑器中选择对应的Module模块并执行Spark作业。控制台操作请参考《数据湖探索用户指南》。API操作请参考《数据湖探索API参考》>《创建批处理作业》。

查看更多 →

南》。 DLI 客户端工具下载 您可以在DLI管理控制台下载DLI客户端工具。 登录DLI管理控制台。 单击总览页右侧“常用链接”中的“SDK下载”。 在“DLI SDK DOWNLOAD”页面，单击“dli-clientkit-<version>”即可下载DLI客户端工具。 D

查看更多 →

轻松完成整个数据的处理分析流程。 数据质量 数据全生命周期管控，数据处理全流程质量监控，异常事件实时通知。 数据目录 提供企业级的元数据管理，厘清信息资产。通过数据地图，实现数据血缘和数据全景可视，提供数据智能搜索和运营监控。 数据服务 数据服务定位于标准化的数据服务平台，提供一

查看更多 →

错误码： permission denied to change owner of foreign-data wrapper %s. 解决方案：必须是系统管理员才能更改外部数据包装器的owner。 level： ERROR GS_138150049 错误码： permission

查看更多 →

DLI SDK DLI SDK功能矩阵 DLI SDK与API的对应关系

查看更多 →

EW中，如需允许DLI在执行作业时访问DEW数据，需要提供IAM委托将DEW数据操作权限委托给DLI，允许DLI服务以您的身份访问DEW服务。 图1 DLI云服务委托 DLI委托 在使用DLI前，为了确保正常使用DLI的功能，建议先进行DLI委托权限设置。 DLI默认提供以下类型

查看更多 →

DLI Flink Job 功能 DLI Flink Job节点用于创建和启动作业，或者查询DLI作业是否正在运行，实现实时流式大数据分析。 DLI Flink流式作业提交到DLI之后，若处于运行中的状态，则认为节点执行成功。若作业配置了周期调度，则会周期检查该Flink作业是否

查看更多 →

永洪BI对接准备工作 操作场景 永洪BI与DLI对接之前的准备工作。 操作步骤 （可选）在公有云管理控制台上方的“服务列表”中选择“大数据”中的“数据湖探索”，单击右上角的“常用链接”下载DLI JDBC驱动（例如：dli-jdbc-1.1.0-jar-with-dependencies-jdk1

查看更多 →

LakeFormation是企业级数据湖一站式构建服务，在存算分离架构基础上提供数据湖元数据统一管理的可视化界面及API，兼容Hive元数据模型以及Ranger权限模型，支持对接 MapReduce服务 （MRS）、 数据仓库 服务 GaussDB（DWS）、数据湖探索（DLI）、 AI开发平台 ModelArts、 数据治理中心

查看更多 →

开发说明 mongo只支持增强型跨源。只能使用包年包月队列。 DDS即文档数据库服务，兼容MongoDB协议。 前提条件 在DLI管理控制台上已完成创建增强跨源连接，并绑定包年/包月队列。具体操作请参考《数据湖探索用户指南》。 认证用的password硬编码到代码中或者明文存储都有很

查看更多 →

有四种保存类型： ErrorIfExis：如果已经存在数据，则抛出异常。 Overwrite：如果已经存在数据，则覆盖原数据。 Append：如果已经存在数据，则追加保存。 Ignore：如果已经存在数据，则不做操作。这类似于SQL中的“如果不存在则创建表”。 读取 CSS 上的数据 1 2 jdbcDF

查看更多 →

首先，通过Kafka生产以下三组数据，通过DLI Flink作业完成数据同步到数据仓库服务 GaussDB(DWS)。接着，需要修改id为2和3的用户为新的jim和tom，再通过DLI Flink作业完成数据的更新并同步到GaussDB(DWS)。 表1 样例数据 id name age

查看更多 →

表名"。 说明： 如果数据库和表不存在，请先创建数据库和表，否则系统会报错并且运行失败。 user RDS数据库用户名。 password RDS数据库用户名对应密码。 driver jdbc驱动类名，访问MySQL集群请填写："com.mysql.jdbc.Driver"，访问PostGre集群请填写："org

查看更多 →

卸载解决方案前，请先确保OBS桶中无数据，否则解决方案将卸载失败。 删除DLI数据库。登录数据湖探索 DLI 库表管理控制台，依次单击“更多”“删除数据库”在弹出的确认窗口中，单击“是”。 图1 删除DLI数据库 图2 确认删除 解决方案部署成功后，登录 资源编排 服务 RFS ，进入“资源栈”，

查看更多 →

概述 欢迎使用数据湖探索。 数据湖探索（Data Lake Insight，简称DLI）是完全兼容Apache Spark、Apache Flink、trino生态，提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。用户不需要管理任何 服务器 ，即开即用。支持标准SQL/Spark

查看更多 →

创建数据连接时选择不同集群 配置DLI环境隔离。 配置企业模式环境隔离，包含DLI队列配置和DB配置。 对于Serverless服务（例如DLI），DataArts Studio通过管理中心的环境隔离来配置生产环境和开发环境数据湖服务的对应关系，在开发和生产流程中自动切换对应的数据湖。因此您需要在

查看更多 →