最新动态
本文介绍了数据湖探索 DLI各特性版本的功能发布和对应的文档动态，欢迎体验。
2024年04月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
新增支持Spark 3.3.1版本 |
DLI遵循开源Spark计算引擎的发布一致性，新增支持Spark 3.3.1版本。 |
商用 |
|
|
2 |
新增支持Flink 1.15版本 |
DLI遵循开源Flink 计算引擎的发布一致性，新增支持Flink 1.15版本。 |
商用 |
|
|
3 |
DLI支持支持可视化配置SQL防御策略 |
DLI支持支持可视化配置SQL防御策略，实现对典型大SQL、低质量SQL的主动防御，包括事前提示、拦截和事中熔断。 |
商用 |
|
|
4 |
DLI委托权限最小化 |
DLI升级了系统委托，将原有的dli_admin_agency升级为dli_management_agency，新的委托包含获取IAM用户信息、跨源操作、消息通知所需的权限。有效避免DLI相关联服务权限不受控制的问题。 |
商用 |
2024年03月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
新增标签策略使用约束限制 |
DLI新增标签策略使用约束限制，即按组织设定的标签策略规则为资源添加标签。 |
商用 |
2024年02月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
新增Spark开源命令支持说明 |
DLI新增Spark开源命令支持说明。 |
商用 |
2024年01月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
新增3.1.1版本依赖包信息 |
DLI新增3.1.1版本依赖包信息。 |
商用 |
|
|
2 |
新增数据赋权API |
DLI新增数据赋权API，用于将数据库或数据表的数据权限赋给指定的其他用户或项目。 |
商用 |
|
|
3 |
新增弹性资源池相关监控指标 |
DLI新增弹性资源池相关监控指标。 |
商用 |
2023年11月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
DLI新增计费说明手册 |
新增“计费说明”手册，介绍DLI计费项、计费说明、计费样例等信息。 |
商用 |
|
|
2 |
优化DLI Spark SQL语法参考中的示例 |
优化DLI Spark SQL语法参考中的示例，补充更多创建OBS表和DLI表的示例信息。 |
商用 |
2023年09月
2023年07月
2023年06月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
提供Spark3.1.1镜像 |
新增Spark3.1.1镜像下载地址。 |
商用 |
|
|
2 |
优化增强型跨源连接操作指导 |
介绍增强型跨源连接的操作步骤。 |
商用 |
|
|
3 |
优化跨源认证操作指导 |
介绍跨源认证的相关操作。 |
商用 |
|
|
4 |
新增Spark内置函数 |
新增Spark内置函数中的数学函数、日期函数、字符串函数、其他函数。 |
商用 |
2023年05月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
设置作业优先级 |
介绍如何设置作业的优先级。 |
商用 |
|
|
2 |
开启Flink作业动态扩缩容 |
介绍如何开启Flink作业动态扩缩容。 |
商用 |
2023年04月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
DLI队列标签管理 |
修改队列标签键和标签值的说明。 |
商用 |
2022年12月
2022年10月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
新增DLI队列与公网网络打通方案 |
通过配置SNAT规则，添加到公网的路由信息，实现DLI队列到和公网的网络打通。 |
商用 |
2022年07月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
DLI开发指南新增“使用Flink Jar连接开启SASL_SSL认证的Kafka” |
介绍使用Flink Jar连接开启SASL_SSL认证的Kafka的操作方法。 |
商用 |
2022年05月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
DLI支持Flink OpenSource SQL 1.12语法 |
DLI支持创建Flink OpenSource SQL 1.12语法作业。 |
商用 |
2022年04月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
DLI最佳实践新增“使用CDM迁移数据到DLI” |
通过云数据迁移服务CDM轻松的将其他云服务或者业务平台的数据迁移至DLI。 |
商用 |
2022年03月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
DLI开发指南新增“在Spark SQL作业中使用UDTF”操作指导 |
DLI支持用户使用Hive UDTF（User-Defined Table-Generating Functions）自定义表值函数，UDTF用于解决一进多出业务场景的业务需求。 |
商用 |
|
|
2 |
DLI开发指南新增“使用Spark Jar作业读取和查询OBS数据”操作指导 |
介绍编写Spark程序代码读取和查询OBS数据、编译打包到提交Spark Jar作业等完整的操作步骤。 |
商用 |
2021年09月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
Flink OpenSource SQL增加ClickHouse和userDefined等语法说明 |
Flink OpenSource SQL增加userDefined源表、userDefined结果表以及ClickHouse结果表的语法说明。 |
商用 |
2021年02月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
支持Flink 1.11版本 |
DLI支持Flink 1.11版本特性。 |
商用 |
|
|
2 |
DLI支持数据多版本 |
DLI提供多版本功能，用于数据的备份与恢复。 |
商用 |
2020年08月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
支持存储量套餐包 |
DLI增加存储量套餐包，降低数据存储在DLI中的费用。 |
商用 |
2020年06月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
支持Spark作业开发者模式 |
用户可以在DLI管理控制台采用API接口模式设置参数及参数值。 |
商用 |
|
|
2 |
计算队列支持跨AZ双活 |
DLI跨AZ队列能够为用户提供跨区域容灾的能力，提高计算的可靠性。 |
商用 |
2020年05月
2020年04月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
支持IAM细粒度授权 |
DLI支持通过IAM进行细粒度授权。 |
商用 |
|
|
2 |
支持Flink 1.10 |
DLI支持Flink 1.10版本特性。 |
商用 |
2020年03月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
支持Spark程序访问DLI元数据 |
DLI支持通过Spark作业访问DLI元数据。 |
商用 |
2020年01月
|
序号 |
功能名称 |
功能描述 |
阶段 |
相关文档 |
|---|---|---|---|---|
|
1 |
支持Flink流作业 |
DLI上线Flink流作业，完全兼容Apache Flink和Spark API，即时执行Stream SQL或自定义作业，提供实时处理流式大数据的全栈能力。 |
商用 |
