数据湖探索 DLI

数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark和Apache Flink生态, 实现批流一体的Serverless大数据计算分析服务。DLI支持多模引擎,企业仅需使用SQL或程序就可轻松完成异构数据源的批处理、流处理、内存计算、机器学习等,挖掘和探索数据价值

 
进入控制台立即购买帮助文档DLI开发者社区1对1咨询                
               

           

    数据湖概念 更多内容
  • 基础概念

    基础概念 指标 概念解读 性能 性能是指软件系统或软件对应其及时性要求的符合程度。及时性用响应时间或吞吐量来衡量。 响应性 响应性是系统实现其响应时间或吞吐量目标的能力。 响应时间(RT) 用户感受系统为其服务所耗费的时间。不同业务系统的响应时间期望值不同,如互联网业务多为500ms以下、金融业务1s以下等。

    来自:帮助中心

    查看更多 →

  • 概念类

    概念类 什么是弹性文件服务? 什么是SFS Turbo? SFS、OBS和EVS有什么区别?

    来自:帮助中心

    查看更多 →

  • 概念相关

    概念相关 什么是IoT边缘? 开通边缘服务失败怎么处理? IoT边缘如何进行设备管理? IoTEdge与IEF的关系和区别是什么?

    来自:帮助中心

    查看更多 →

  • 相关概念

    相关概念 数据库 数据库用于管理各类数据对象,与其他数据库隔离。创建数据对象时可以指定对应的表空间,如果不指定相应的表空间,相关的对象会默认保存在PG_DEFAULT空间中。数据库管理的对象可分布在多个表空间上。 表空间 在 GaussDB 中,表空间是一个目录,实例中可以存在多个表

    来自:帮助中心

    查看更多 →

  • 核心概念

    核心概念 以下将介绍Framework的主要概念,以及它们与华为云 函数工作流 的关系。 函数 函数是华为云函数工作流函数。它是一个独立的部署单元,就像微服务一样。它只是部署在云中的代码,主要是为了执行单个任务而编写,例如: 将用户保存到数据库。 处理数据库中的文件。 您可以在代码中

    来自:帮助中心

    查看更多 →

  • 常见概念

    常见概念 HBase表 HBase的表是三个维度排序的映射。从行主键、列主键和时间戳映射为单元格的值。所有的数据存储在HBase的表单元格中。 列 HBase表的一个维度。列名称的格式为“<family>:<label>”,<family>和<label>为任意字符组合。表由<f

    来自:帮助中心

    查看更多 →

  • 数据湖建设和持续运营

    数据湖 建设和持续运营 场景描述 数据湖建设和持续运营,是指数据湖的初始化建设及后续日常的海量元数据及权限管理,因此用户需要便捷高效的建设和管理方式。 传统方式的弊端 仅支持通过计算引擎(Hive、Spark等)执行SQL实现元数据的定义、修改、查询,对用户有一定的技能要求,缺少提升易用性的可视化界面。

    来自:帮助中心

    查看更多 →

  • 概述

    数据进行探索。 您可以使用本文档提供API对数据湖探索进行相关操作,包括队列、SQL作业、Flink作业、Spark作业和跨源连接等等。支持的全部操作请参见API概览。 在调用数据湖探索API之前,请确保已经充分了解数据湖探索相关概念。详细信息请参见产品介绍。 父主题: API使用前必读

    来自:帮助中心

    查看更多 →

  • 数据湖治理平台设计

    如图所示, DataArts Studio 基于数据湖底座,提供数据集成、开发、治理等能力。DataArts Studio支持对接数据湖与数据库云服务作为数据湖底座,例如 MRS Hive、 数据仓库 服务DWS等,也支持对接企业传统数据仓库,例如Oracle、MySQL等。 DataArts Studio包含如下功能组件:

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 数据服务页面上的基本概念如下,其他各个工具的基本概念请在各个工具中查看。 抽取规则 在二进制文件解析完成后,根据用户自己设定的抽取规则,获取期望的解析结果。抽取规则可以为xml文件,也可以在页面手动输入。 待标注文件 待标注的时序指标数据文件。文件至少包含一列时间序列数据和一列指标数据。

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 凭证 凭证是识别用户身份的依据,您通过API访问地图瓦片服务时,需要使用凭证来通过系统的鉴权认证。 MapDS控制台凭证操作方式参见管理凭证。 请求获取地图瓦片时,需要在API的Query参数中携带凭证。 请求示例 1 GET https://mapds.myhuaweicloud

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 产品基本概念 区域和可用区

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 数据目录 数据集的组织目录。 数据集 数据集是一种由数据所组成的集合,这些数据通常具有相似的特征或支撑目标。 数据集元数据 描述数据集数据具体特征的实体。 数据字典 描述数据集数据字段信息的集合。 样例数据 从数据集数据中随机抽取的10条数据,作为数据集数据的参考,供消费者或开发者参考使用。

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 AI引擎 可支持用户进行机器学习、深度学习、模型训练作业开发的框架,如Tensorflow、Spark MLlib、MXNet、PyTorch、华为自研AI框架MindSpore等。 数据集 某业务下具有相同数据格式的数据逻辑集合。 特征操作 特征操作主要是对数据集进行特征处理。

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 区域和可用区 关于区域和可用区的描述,请参见区域和可用区。 项目 资源的集合,用户开通的资源必须挂载在项目下,是授权的最小粒度,用于实现租户内不同部门、不同项目、或同一项目不同环境(开发、测试、生产)之间的隔离。 工作空间 工作空间从系统层面为管理者提供对使用 DLV 的用

    来自:帮助中心

    查看更多 →

  • 常用概念

    华为云帮助中心,为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档,帮助您快速上手使用华为云服务。

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 端侧、云侧、边 端侧指用户摄像头等设备,云侧指华为云,边指华为智能边缘设备。 技能(Skill) 技能(Skill)是运行在端侧摄像头的人工智能应用,一般由模型和逻辑代码组成。其中,逻辑代码是技能的框架,负责控制技能的运行,包括数据读入、模型导入、模型推理、结果输出等;

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 帐号 用户注册华为云时的帐号,帐号对其所拥有的资源及云服务具有完全的访问权限,可以重置用户密码、分配用户权限等。由于帐号是付费主体,为了确保帐号安全,建议您不要直接使用帐号进行日常管理工作,而是创建用户并使用他们进行日常管理工作。 用户 由帐号在IAM中创建的用户,是云

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 账号 用户注册华为云时的账号,账号对其所拥有的资源及云服务具有完全的访问权限,可以重置用户密码、分配用户权限等。由于账号是付费主体,为了确保账号安全,建议您不要直接使用账号进行日常管理工作,而是创建用户并使用他们进行日常管理工作。 用户 由账号在IAM中创建的用户,是云

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 使用智能排班模型BO API涉及的常用概念。 名称 描述 BO BO(全称Business Object)即商业对象,是封装了完整的数据模型、业务逻辑、页面展现的软件单元,通过开放出来的接口为上层应用提供服务。BO也可以提供管理页面,对自身的数据进行配置管理。 用户可基

    来自:帮助中心

    查看更多 →

  • 基本概念

    基本概念 账号 用户注册时的账号,账号对其所拥有的资源及云服务具有完全的访问权限,可以重置用户密码、分配用户权限等。由于账号是付费主体,为了确保账号安全,建议您不要直接使用账号进行日常管理工作,而是创建用户并使用用户进行日常管理工作。 用户 由账号在IAM中创建的用户,是云服务的

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了