华为云

面向未来的智能世界,数字化是企业发展的必由之路。数字化成功的关键是以云原生的思维践行云原生,全数字化、全云化、AI驱动,一切皆服务。

华为云将持续创新,携手客户、合作伙伴和开发者,致力于让云无处不在,让智能无所不及,共建智能世界云底座。

 
 

    华为云 dli 更多内容
  • 数据湖探索 DLI

    list - - dli:catalog:bind 授予数据目录绑定权限。 write - - dli:catalog:get 授予数据目录详情查询权限。 read - - dli:queue:list 授予队列列表查询权限。 list queue * - - g:RequestTag/<tag-key>

    来自:帮助中心

    查看更多 →

  • 快速配置CloudLink Box/CloudLink Bar

    快速配置CloudLink Box/CloudLink Bar 通过IWB快速配置 通过Web界面快速配置 通过Touch快速配置

    来自:帮助中心

    查看更多 →

  • 快速配置CloudLink Box/CloudLink Bar

    快速配置CloudLink Box/CloudLink Bar 通过Web界面快速配置 通过Touch快速配置 父主题: 管理专业会议终端

    来自:帮助中心

    查看更多 →

  • 迁移Kafka数据至DLI

    选择1.b已创建的 DLI 数据源连接。 资源队列 选择已创建的DLI SQL类型的队列。 数据库名称 选择DLI下已创建的数据库。当前示例为在DLI上创建数据库和表中创建的数据库名,即为“testdb”。 表名 选择DLI下已创建的表名。当前示例为在DLI上创建数据库和表中创建的表名,即为“testdlitable”。

    来自:帮助中心

    查看更多 →

  • 迁移DWS数据至DLI

    迁移DWS数据DLI 本文为您介绍如何通过 CDM 数据同步功能,迁移数据仓库服务DWS数据DLI。 前提条件 已创建DLI的SQL队列。创建DLI队列的操作可以参考创建DLI队列。 创建DLI队列时队列类型需要选择为“SQL队列”。 已创建数据仓库服务DWS集群。具体创建DWS集群的操作可以参考创建DWS集群。

    来自:帮助中心

    查看更多 →

  • DLI适用哪些场景

    OBS、DIS、 DataArts Studio 地理大数据分析 地理大数据分析 地理大数据具有大数据的相关特征,数据体量巨大,例如全球卫星遥感影像数据量达到PB级;数据种类多,有结构化的遥感影像栅格数据、矢量数据,非结构化的空间位置数据、三维建模数据;在大体量的地理大数据中,通过高效的挖掘工具或者挖掘方法实现价值提炼,是用户非常关注的话题。

    来自:帮助中心

    查看更多 →

  • 创建DLI委托(废弃)

    具体含义如下: obs_adm:DLI获得访问和使用OBS的委托权限。 dis_adm:访问和使用DIS数据源,需要获得访问和使用DIS(数据接入服务)DIS Administrator权限。 ctable_adm:访问和使用CloudTable( 表格存储 服务)的CloudTable Administrator权限。

    来自:帮助中心

    查看更多 →

  • 添加DLI转储任务

    OBS:转储到OBS MRS :转储到MRS DLI:转储到DLI CLOUDTABLE:转储到CloudTable DWS:转储到DWS 缺省值:NOWHERE 枚举值: DLI dli_destination_descriptor 否 DliDestinationDescriptorRequest

    来自:帮助中心

    查看更多 →

  • 读取DLI表

    读取DLI表 概述 读取用户于DLI服务创建的外表(OBS表)。 输入 无 输出 数据集 参数说明 参数 参数说明 DLI_database 用户的目标DLI数据库名称 DLI_table 用户的目标DLI数据库中目标DLI外表(OBS表)的名称 样例 params = {

    来自:帮助中心

    查看更多 →

  • DLI数据源

    DLI数据源 操作场景 数据湖探索 (Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析

    来自:帮助中心

    查看更多 →

  • 查看DLI SQL日志

    查看DLI SQL日志 场景概述 日常运维时需要查看DLI SQL日志。 操作步骤 在DataArts Studio控制台获取DataArts Studio执行DLI作业的job id。 图1 查看日志 图2 查找job id 在DLI控制台,选择“作业管理”>“SQL作业”。 在SQL作业管理页面,输入对应的job

    来自:帮助中心

    查看更多 →

  • 配置DLI源端参数

    配置DLI源端参数 作业中源连接为DLI连接时,源端作业参数如表1所示。 表1 DLI作为源端时的作业参数 参数名 说明 取值样例 资源队列 选择目的表所属的资源队列。 DLI的default队列无法在迁移作业中使用,您需要在DLI中新建SQL队列。 cdm 数据库名称 写入数据的数据库名称。

    来自:帮助中心

    查看更多 →

  • 配置DLI源端参数

    配置DLI源端参数 作业中源连接为DLI连接时,源端作业参数如表1所示。 表1 DLI作为源端时的作业参数 参数名 说明 取值样例 资源队列 选择目的表所属的资源队列。 DLI的default队列无法在迁移作业中使用,您需要在DLI中新建SQL队列。 cdm 数据库名称 写入数据的数据库名称。

    来自:帮助中心

    查看更多 →

  • DLI委托权限设置

    DLI委托权限设置 DLI委托概述 更新DLI委托权限 自定义DLI委托权限 常见场景的委托权限策略 DLI委托权限配置场景开发指南

    来自:帮助中心

    查看更多 →

  • 配置DLI作业桶

    配置DLI作业桶 操作场景 DLI作业在创建过程中会选择OBS桶,该桶用于存储DLI作业运行过程中产生的临时数据,例如:作业日志、作业结果。 本节操作指导您在DLI管理控制台的“全局配置 > 工程配置”页面配置DLI作业桶。 配置前,请先购买OBS桶或并行文件系统。大数据场景推荐

    来自:帮助中心

    查看更多 →

  • 更新DLI委托权限

    示例1和示例2给出了同一个区域的不同项目更新DLI委托带来的委托权限差异。 更新DLI委托权限(dli_management_agency) 本节操作介绍更新dli_management_agency的操作步骤,如果您使用的仍然是dli_admin_agency,请参考 在DLI控制台左侧导航栏中单击“全局配置

    来自:帮助中心

    查看更多 →

  • 日志转储至DLI

    选择已创建的日志流。 说明: 已配置过DLI集群转储的日志流不能重复配置。 - DLI-数据库 需要转储的目标DLI数据库名称。更多信息请参见DLI库表管理。 test DLI-数据表 需要转储的目标DLI数据库表名称。更多信息请参见DLI库表管理。 - 表普通列映射 将内置字段

    来自:帮助中心

    查看更多 →

  • 获取DLI委托信息(废弃)

    系统提示信息,执行成功时,信息可能为空。 version 否 String 委托版本信息。 current_roles 否 Array of Strings 角色。目前只支持: obs_adm:DLI获得访问和使用OBS的委托权限。 dis_adm:访问和使用DIS数据源,需要获得访问和使用DIS(数据接入服务)DIS

    来自:帮助中心

    查看更多 →

  • DLI自定义策略

    请参考策略语法中的条件键说明。 服务级条件键,仅适用于对应服务的操作。 运算符与条件键一起使用,构成完整的条件判断语句。具体内容请参考表1。 DLI通过IAM预置了一组条件键。下表显示了适用于DLI服务特定的条件键。 表1 DLI请求条件 DLI条件键 类型 运算符 描述 g:CurrentTime

    来自:帮助中心

    查看更多 →

  • 创建DLI全局变量

    创建DLI全局变量 什么是全局变量 DLI支持在管理控制台设置全局变量,将作业开发过程中频繁使用的变量设置为全局变量,可以避免在编辑作业过程中重复定义,减少开发与维护成本。通过使用全局变量可以替换长难复杂变量,简化复杂参数,提升SQL语句可读性。 本节操作为您介绍如何创建全局变量。

    来自:帮助中心

    查看更多 →

  • 使用ma-cli dli-job命令提交DLI Spark作业

    使用ma-cli dli-job get-log命令查询DLI Spark运行日志 使用ma-cli dli-job get-queue命令查询DLI 队列 使用ma-cli dli-job get-resource命令查询DLI 分组资源 使用ma-cli dli-job upload命令上传文件到DLI分组资源

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了