数据湖探索 DLI

数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark和Apache Flink生态, 实现批流一体的Serverless大数据计算分析服务。DLI支持多模引擎,企业仅需使用SQL或程序就可轻松完成异构数据源的批处理、流处理、内存计算、机器学习等,挖掘和探索数据价值

 
进入控制台立即购买帮助文档DLI开发者社区1对1咨询                
               

           

    数据湖 元数据管理 更多内容
  • 修订记录

    录中的“元数据管理与数据处理(旧版本)”章节移到数据开发下面。 华为云新增HUAWEI ID登录方式,修改访问数据服务中的界面截图。 2020-03-30 新增3个服务:数据加载服务、元数据管理(新版本)、数据处理(新版本)。 元数据管理与数据处理服务更名为:元数据管理与数据处理(旧版本)。

    来自:帮助中心

    查看更多 →

  • 复制元数据

    复制元数据 编辑元数据时,会覆盖之前的元数据文件,为避免原始元数据文件丢失,建议您在编辑元数据之前,先复制一份元数据。 操作步骤 在“元数据管理”页面,复制元数据有两个入口: 单击对应元数据文件名称,进入元数据详情页,在页面底端单击“复制”。 在对应的元数据文件的“操作”列,单击“复制”。

    来自:帮助中心

    查看更多 →

  • 管理面API(V1)

    管理面API(V1) 系统管理API 图管理API 备份管理API 元数据管理API 任务中心API 父主题: 历史API

    来自:帮助中心

    查看更多 →

  • 事件管理

    事件管理 元事件 事件属性 用户属性 父主题: 元数据管理

    来自:帮助中心

    查看更多 →

  • 数据湖队列什么情况下是空闲状态?

    数据湖 队列什么情况下是空闲状态? 队列空闲状态是指在 DLI 作业管理中,该队列下均无SQL 作业运行,或者 Flink 作业运行、Spark 作业运行。 即一个自然小时内无作业运行,该自然小时为空闲状态。不会进行计费。 通常按需计费的队列,在空闲1h后计算资源会被释放,再次使用时

    来自:帮助中心

    查看更多 →

  • 修订记录

    修改如下接口: 保存项目为模板 查询模板列表 2020-03-30 元数据管理与数据处理更名为:元数据管理与数据处理接口(旧版本)。 数据权限管理更名为:数据安全接口。 新增如下章节: 数据加载接口 元数据管理(新版本) 数据处理(新版本)接口 数据准备接口 2019-12-30

    来自:帮助中心

    查看更多 →

  • 修订记录

    数据资产管理服务界面改版,所有服务的访问路径更新。 元数据管理(新版本)的“目录管理”菜单变更为“分层管理”,资料对应更新。 2020-03-30 新增3个服务:数据加载服务、元数据管理(新版本)、数据处理(新版本)。 元数据管理与数据处理服务更名为:元数据管理与数据处理(旧版本)。 数据权限管理更名为:数据安全服务。

    来自:帮助中心

    查看更多 →

  • 常用命令

    常用命令 查看帮助信息 自动补全 交互式提示 元数据管理 查询当前版本 版本更新 日志管理 模板管理 管理OBS中的数据

    来自:帮助中心

    查看更多 →

  • 管理面API(V2)

    管理面API(V2) 系统管理API 图管理API 备份管理API 元数据管理API 任务中心API GraphPlugins管理API

    来自:帮助中心

    查看更多 →

  • 删除元数据

    删除元数据 当元数据文件失效后,您可以在“元数据管理”页面,对应的元数据文件“操作”列中单击“删除”,来删除元数据文件。 数据删除后无法恢复,请谨慎操作。 图1 删除元数据 父主题: 元数据操作

    来自:帮助中心

    查看更多 →

  • 权限和授权项

    权限和授权项 权限及授权项说明 生命周期管理 状态管理 规格查询 网卡管理 磁盘管理 元数据管理 租户配额管理 密码管理

    来自:帮助中心

    查看更多 →

  • 查找元数据

    查找元数据 在“元数据管理”页面,您可以在搜索框中输入元数据文件的名称进行查找。 图1 查找元数据 父主题: 元数据操作

    来自:帮助中心

    查看更多 →

  • 运营中心

    AppStage运营中心简介 进入AppStage运营中心 AppStage运营中心概览 看板 数据管理 指标模板库 数据模型 指标管理 元数据管理 运营分析 看板管理 审计日志

    来自:帮助中心

    查看更多 →

  • API(OpenStack Nova 原生)

    API(OpenStack Nova 原生) 查询API版本信息 生命周期管理 状态管理 网络管理 安全组管理 规格管理 网卡管理 磁盘管理 元数据管理 租户配额管理 密钥、密码管理 云服务器 组管理 云 服务器 操作管理 云服务器控制台管理 可用区 标签管理 历史版本

    来自:帮助中心

    查看更多 →

  • API(推荐)

    API(推荐) 生命周期管理 状态管理 批量操作 规格管理 网卡管理 磁盘管理 元数据管理 租户配额管理 查询Job状态 标签管理 密码管理 云服务器组管理 智能购买组管理 规格推荐管理

    来自:帮助中心

    查看更多 →

  • 创建元数据

    array”数据类型,多值类型不支持该数据类型。 操作 删除:删除不需要的属性。 单击“确定”完成操作,当元数据创建完成后,元数据文件将展示在元数据管理页面。 在元数据管理页面,您可以查看元数据的存储路径,状态,修改时间,是否加密等信息。 父主题: 元数据操作

    来自:帮助中心

    查看更多 →

  • 产品功能

    产品功能 作业管理 元数据管理 企业项目管理 多租户资源管理 组件WebUI便捷访问 节点自定义引导操作 集群管理 集群运维 集群状态消息通知 MRS 安全增强 MRS可靠性增强

    来自:帮助中心

    查看更多 →

  • 创建并提交SQL作业

    创建并提交SQL作业 SQL编辑器简介 SQL作业编辑器支持使用SQL语句执行数据查询操作。 支持SQL2003,兼容SparkSQL,详细语法描述请参见《数据湖探索SQL语法参考》。 在总览页面,单击左侧导航栏中的“SQL编辑器”或SQL作业简介右上角的“创建作业”,可进入“SQL编辑器”页面。

    来自:帮助中心

    查看更多 →

  • 数据开发与治理

    数据开发与治理 数据源管理与数据标准管理 数据建模 数据开发 数据血缘、资源管理、函数管理和变量管理 数据发布CI/CD、任务运维 数据质量管理 元数据管理 数据资源管理 数据服务管理 数据安全 父主题: 产品操作

    来自:帮助中心

    查看更多 →

  • 管理员操作

    Studio通过管理中心的创建数据连接区分开发环境和生产环境的数据湖服务,在开发和生产流程中自动切换对应的数据湖。因此您需要准备两套数据湖服务(即两个集群),且两套数据湖服务的版本、规格、组件、区域、VPC、子网以及相关配置等信息,均应保持一致。 例如,当您的数据湖服务为MRS集群时,需要准备两套MRS

    来自:帮助中心

    查看更多 →

  • DataGovernance,DataGenerate和DataModeling三个目录的作用是什么?

    DataGovernance是从DG同步数据的默认归属目录;DataGenerate是数据生成服务注册数据集的默认目录;DataModeling是数据建模的默认目录。元数据管理(新版本)中创建的模型会放在DataModeling目录下统一管理。 父主题: 数据建模

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了