华为云

面向未来的智能世界,数字化是企业发展的必由之路。数字化成功的关键是以云原生的思维践行云原生,全数字化、全云化、AI驱动,一切皆服务。

华为云将持续创新,携手客户、合作伙伴和开发者,致力于让云无处不在,让智能无所不及,共建智能世界云底座。

 
 

    华为dli 更多内容
  • DLI内置依赖包

    0.jar jaeger-core-1.6.0.jar netty-handler-ssl-ocsp-4.1.86.Final.jar avatica-server-1.16.0.jar jaeger-thrift-1.6.0.jar netty-resolver-4.1.86.Final

    来自:帮助中心

    查看更多 →

  • 管理DLI资源配额

    我的配额”。 系统进入“服务配额”页面。 图1 我的配额 您可以在“服务配额”页面,查看各项资源的总配额及使用情况。 如果当前配额不能满足业务要求,请参考后续操作,申请扩大配额。 如何申请扩大配额? 登录管理控制台。 在页面右上角,选择“资源 > 我的配额”。 系统进入“服务配额”页面。 图2

    来自:帮助中心

    查看更多 →

  • 创建DLI表

    创建 DLI 表 使用DataSource语法创建DLI表 使用Hive语法创建DLI表 父主题: 表相关

    来自:帮助中心

    查看更多 →

  • 创建DLI表

    创建DLI表 使用DataSource语法创建DLI表 使用Hive语法创建DLI表 父主题: Spark SQL语法参考(即将下线)

    来自:帮助中心

    查看更多 →

  • 配置DLI源端参数

    配置DLI源端参数 支持从DLI导出数据。 表1 DLI作为源端时的作业参数 参数名 说明 取值样例 资源队列 选择目的表所属的资源队列。 DLI的default队列无法在迁移作业中使用,您需要在DLI中新建SQL队列。 cdm 数据库名称 写入数据数据库名称。 dli 表名 写入数据的表名。

    来自:帮助中心

    查看更多 →

  • 创建DLI脱敏任务

    组成。 数据源选择 选择数据来源。仅支持“DLI”。 数据源 如果没有可使用的数据库实例,可单击“添加云数据库”,添加大数据资产,具体的操作可参见授权大数据资产。 数据库实例:选择脱敏数据所在的数据库实例。 数据库名:选择需要脱敏的数据库。 数据表名:选择需要脱敏的数据表。 说明:

    来自:帮助中心

    查看更多 →

  • 迁移Kafka数据至DLI

    选择1.b已创建的DLI数据源连接。 资源队列 选择已创建的DLI SQL类型的队列。 数据库名称 选择DLI下已创建的数据库。当前示例为在DLI上创建数据库和表中创建的数据库名,即为“testdb”。 表名 选择DLI下已创建的表名。当前示例为在DLI上创建数据库和表中创建的表名,即为“testdlitable”。

    来自:帮助中心

    查看更多 →

  • 迁移DWS数据至DLI

    迁移DWS数据DLI 本文为您介绍如何通过 CDM 数据同步功能,迁移数据仓库服务DWS数据DLI。 前提条件 已创建DLI的SQL队列。创建DLI队列的操作可以参考创建DLI队列。 创建DLI队列时队列类型需要选择为“SQL队列”。 已创建数据仓库服务DWS集群。具体创建DWS集群的操作可以参考创建DWS集群。

    来自:帮助中心

    查看更多 →

  • DLI产品咨询类

    DLI产品咨询类 DLI Flink与 MRS Flink有什么区别? DLI中的Spark组件与MRS中的Spark组件有什么区别? 怎样升级DLI作业的引擎版本 DLI数据可存储在哪些地方 DLI是否支持导入其他租户共享OBS桶的数据? 区域和可用区 全局变量的使用中,一个子

    来自:帮助中心

    查看更多 →

  • 创建DLI委托(废弃)

    具体含义如下: obs_adm:DLI获得访问和使用OBS的委托权限。 dis_adm:访问和使用DIS数据源,需要获得访问和使用DIS(数据接入服务)DIS Administrator权限。 ctable_adm:访问和使用CloudTable( 表格存储 服务)的CloudTable Administrator权限。

    来自:帮助中心

    查看更多 →

  • DLI常用管理操作

    DLI常用管理操作 使用 自定义镜像 增强作业运行环境 管理DLI全局变量 管理Jar作业程序包 管理DLI资源配额

    来自:帮助中心

    查看更多 →

  • 添加DLI转储任务

    OBS:转储到OBS MRS:转储到MRS DLI:转储到DLI CLOUDTABLE:转储到CloudTable DWS:转储到DWS 缺省值:NOWHERE 枚举值: DLI dli_destination_descriptor 否 DliDestinationDescriptorRequest

    来自:帮助中心

    查看更多 →

  • 配置DLI源端参数

    配置DLI源端参数 作业中源连接为DLI连接时,源端作业参数如表1所示。 表1 DLI作为源端时的作业参数 参数名 说明 取值样例 资源队列 选择目的表所属的资源队列。 DLI的default队列无法在迁移作业中使用,您需要在DLI中新建SQL队列。 cdm 数据库名称 写入数据的数据库名称。

    来自:帮助中心

    查看更多 →

  • 配置DLI作业桶

    配置DLI作业桶 使用DLI服务前需配置DLI作业桶,该桶用于存储DLI作业运行过程中产生的临时数据,例如:作业日志、作业结果。 本节操作指导您在DLI管理控制台的“全局配置 > 工程配置”页面配置DLI作业桶。 操作前准备 配置前,请先购买OBS桶或并行文件系统。 大数据场景推

    来自:帮助中心

    查看更多 →

  • 配置DLI源端参数

    配置DLI源端参数 作业中源连接为DLI连接时,源端作业参数如表1所示。 表1 DLI作为源端时的作业参数 参数名 说明 取值样例 资源队列 选择目的表所属的资源队列。 DLI的default队列无法在迁移作业中使用,您需要在DLI中新建SQL队列。 cdm 数据库名称 写入数据的数据库名称。

    来自:帮助中心

    查看更多 →

  • 日志转储至DLI

    选择已创建的日志流。 说明: 已配置过DLI集群转储的日志流不能重复配置。 - DLI-数据库 需要转储的目标DLI数据库名称。更多信息请参见DLI库表管理。 test DLI-数据表 需要转储的目标DLI数据库表名称。更多信息请参见DLI库表管理。 - 表普通列映射 将内置字段

    来自:帮助中心

    查看更多 →

  • MaxCompute迁移至DLI数据校验

    MaxCompute迁移至DLI数据校验 本文主要介绍将阿里云 MaxCompute数据迁移至华为 数据湖探索 DLI后,使用迁移中心 MgC进行数据一致性校验的步骤和方法。 准备工作 需要先在源端内网环境中安装用于配合数据校验的工具Edge并注册用户,方法请参见安装Linux版本的Edge工具。

    来自:帮助中心

    查看更多 →

  • DLI自定义策略

    请参考策略语法中的条件键说明。 服务级条件键,仅适用于对应服务的操作。 运算符与条件键一起使用,构成完整的条件判断语句。具体内容请参考表1。 DLI通过IAM预置了一组条件键。下表显示了适用于DLI服务特定的条件键。 表1 DLI请求条件 DLI条件键 类型 运算符 描述 g:CurrentTime

    来自:帮助中心

    查看更多 →

  • 管理DLI全局变量

    管理DLI全局变量 什么是全局变量 DLI支持在管理控制台设置全局变量,将作业开发过程中频繁使用的变量设置为全局变量,可以避免在编辑作业过程中重复定义,减少开发与维护成本。通过使用全局变量可以替换长难复杂变量,简化复杂参数,提升SQL语句可读性。 本节操作为您介绍如何创建全局变量。

    来自:帮助中心

    查看更多 →

  • 使用DLI提交Flink作业

    使用DLI提交Flink作业 Flink作业概述 创建Flink OpenSource SQL作业 创建Flink Jar作业 配置Flink作业权限 管理Flink作业 管理Flink作业模板 添加Flink作业标签

    来自:帮助中心

    查看更多 →

  • 获取DLI委托信息(废弃)

    系统提示信息,执行成功时,信息可能为空。 version 否 String 委托版本信息。 current_roles 否 Array of Strings 角色。目前只支持: obs_adm:DLI获得访问和使用OBS的委托权限。 dis_adm:访问和使用DIS数据源,需要获得访问和使用DIS(数据接入服务)DIS

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了