数据湖探索 DLI

数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark和Apache Flink生态, 实现批流一体的Serverless大数据计算分析服务。DLI支持多模引擎,企业仅需使用SQL或程序就可轻松完成异构数据源的批处理、流处理、内存计算、机器学习等,挖掘和探索数据价值

 
进入控制台立即购买帮助文档DLI开发者社区1对1咨询                
               

           

    flink规则引擎cep 更多内容
  • 使用Flink

    使用Flink Flink作业引擎概述 Flink用户权限管理 Flink客户端使用实践 创建FlinkServer作业前准备 创建FlinkServer作业 管理FlinkServer作业 Flink企业级能力增强 Flink运维管理 Flink性能调优 Flink客户端常见命令说明

    来自:帮助中心

    查看更多 →

  • 修复Flink

    修复Flink 前提条件 已获取 FusionInsight Manager登录地址及admin账号。 操作步骤 登录FusionInsight Manager页面,选择“集群 > 服务 > Flink > 配置 > 全部配置”,搜索参数“FLINK_SERVER_GC_OPTS”,在该参数值中添加“

    来自:帮助中心

    查看更多 →

  • 使用Flink

    principal:pippo” Flink客户端执行命令报错“Could not connect to the leading JobManager” 使用不同用户执行yarn-session创建Flink集群失败 Flink业务程序无法读取NFS盘上的文件 自定义Flink log4j日志输出级别不生效

    来自:帮助中心

    查看更多 →

  • 规则管理

    在左侧导航栏单击【规则引擎】模块展开子级菜单导航,选择【规则引擎>规则管理】,进入规则管理界面,在规则管理列表选择需要启用的规则,单击“启用”按钮,启用成功,如下图: 图4 启用规则 禁用规则 操作步骤:在左侧导航栏单击【规则引擎】模块展开子级菜单导航,选择【规则引擎>规则管理】,进

    来自:帮助中心

    查看更多 →

  • 查看Kafka Topic信息

    Topic监控不显示,请按以下步骤恢复: 登录到集群的主 OMS 节点,执行以下切换到omm用户: su - omm 重启cep服务: restart_app cep 重启后等待3分钟,再次查看kafka Topic监控。 在KafkaUI查看Kafka Topic信息( MRS 3.1

    来自:帮助中心

    查看更多 →

  • Flink作业相关

    Flink作业相关 前提条件 已参考Java SDK概述配置Java SDK环境。 已参考初始化 DLI 客户端完成客户端DLIClient的初始化,参考队列相关完成队列创建等操作。 新建SQL作业 DLI提供新建Flink SQL作业的接口。您可以使用该接口新建Flink SQL作业并提交到DLI,示例代码如下:

    来自:帮助中心

    查看更多 →

  • 导入Flink作业

    导入Flink作业 功能介绍 该API用于导入Flink作业数据。 调试 您可以在 API Explorer 中调试该接口。 URI URI格式 POST /v1.0/{project_id}/streaming/jobs/import 参数说明 表1 URI参数说明 参数名称 是否必选

    来自:帮助中心

    查看更多 →

  • Flink日志介绍

    Flink日志介绍 日志描述 日志存储路径: Flink作业运行日志:“${BIGDATA_DATA_HOME}/hadoop/data${i}/nm/containerlogs/application_${appid}/container_{$contid}”。 运行中的任务日

    来自:帮助中心

    查看更多 →

  • 开发Flink应用

    开发Flink应用 Flink DataStream样例程序 Flink Kafka样例程序 Flink开启Checkpoint样例程序 Flink Job Pipeline样例程序 Flink Join样例程序 Flink对接 云搜索服务 CSS )样例程序 父主题: Flink开发指南(普通模式)

    来自:帮助中心

    查看更多 →

  • 开发Flink应用

    开发Flink应用 Flink DataStream样例程序 Flink Kafka样例程序 Flink开启Checkpoint样例程序 Flink Job Pipeline样例程序 Flink Join样例程序 父主题: Flink开发指南(安全模式)

    来自:帮助中心

    查看更多 →

  • Flink对接OBS

    Flink对接OBS 概述 Flink是一个分布式的数据处理引擎,用于处理有界和无界流式数据。Flink定义了文件系统抽象,OBS服务实现了Flink的文件系统抽象,使得OBS可以作为flink StateBackend和数据读写的载体。 注意事项 flink-obs-fs-hadoop目前仅支持OBS并行文件系统。

    来自:帮助中心

    查看更多 →

  • Flink作业类

    Flink作业类 Flink作业咨询类 Flink SQL作业类 Flink Jar作业类 Flink作业性能调优类

    来自:帮助中心

    查看更多 →

  • Flink日志介绍

    Flink日志介绍 日志描述 日志存储路径: Flink作业运行日志:“${BIGDATA_DATA_HOME}/hadoop/data${i}/nm/containerlogs/application_${appid}/container_{$contid}”。 运行中的任务日

    来自:帮助中心

    查看更多 →

  • 开发Flink应用

    开发Flink应用 Flink DataStream样例程序 Flink Kafka样例程序 Flink开启Checkpoint样例程序 Flink Job Pipeline样例程序 Flink Join样例程序 Flink Jar作业提交SQL样例程序 FlinkServer REST

    来自:帮助中心

    查看更多 →

  • 开发Flink应用

    开发Flink应用 DataStream程序 向Kafka生产并消费数据程序 异步Checkpoint机制程序 Stream SQL Join程序 父主题: Flink开发指南

    来自:帮助中心

    查看更多 →

  • 开发Flink应用

    开发Flink应用 Flink DataStream样例程序 Flink Kafka样例程序 Flink开启Checkpoint样例程序 Flink Job Pipeline样例程序 Flink Join样例程序 Flink Jar作业提交SQL样例程序 FlinkServer REST

    来自:帮助中心

    查看更多 →

  • Flink作业概述

    Flink作业概述 DLI支持的两种类型的Flink作业: Flink OpenSource SQL类型作业: 完全兼容社区版的Flink,确保了作业可以在这些Flink版本上无缝运行。 在社区版Flink的基础上,DLI扩展了Connector的支持,新增了Redis、DWS作

    来自:帮助中心

    查看更多 →

  • 规则日志

    规则日志 规则日志功能是平台规则引擎的规则任务执行记录的历史记录查询功能。 删除规则日志 支持多选删除。 操作步骤:在左侧导航栏单击【规则引擎】模块展开子级菜单导航,选择【规则引擎>规则日志】,进入规则日志查询界面,在规则日志列表勾选需要删除的日志记录,单击“删除”按钮,弹出删除

    来自:帮助中心

    查看更多 →

  • 查看Kafka Topic信息

    Topic监控不显示,请按以下步骤恢复: 登录到集群的主OMS节点,执行以下切换到omm用户: su - omm 重启cep服务: restart_app cep 重启后等待3分钟,再次查看kafka Topic监控。 在KafkaUI查看Kafka Topic信息 进入KafkaUI界面。

    来自:帮助中心

    查看更多 →

  • 导出Flink作业

    导出Flink作业 功能介绍 该API用于导出Flink作业数据。 调试 您可以在API Explorer中调试该接口。 URI URI格式 POST /v1.0/{project_id}/streaming/jobs/export 参数说明 表1 URI参数说明 参数名称 是否必选

    来自:帮助中心

    查看更多 →

  • Flink故障排除

    Flink故障排除 使用不同用户执行yarn-session创建Flink集群失败 使用Flink过程中,具有两个相同权限用户testuser和bdpuser。使用用户testuser创建Flink集群正常,但是切换至bdpuser用户创建Fllink集群时,执行yarn-session

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了