短信应用的作用是什么？ 短信应用是用户使用短信服务的载体。创建应用后，系统会自动分配全局唯一的APP_Key和APP_Secret，并提供APP接入地址。其中，APP_Key和APP_Secret是用户身份的唯一标识，调用短信业务API时需携带，用于认证鉴权。 父主题： 应用相关

查看更多 →

coalesce(numPartitions: Int, shuffle: Boolean = false) 当shuffle为true的时候，函数作用与repartition(numPartitions: Int)相同，会将数据通过Shuffle的方式重新分区；当shuffle为false的时候，则只是简单

查看更多 →

使用External Shuffle Service提升性能 操作场景 Spark系统在运行含shuffle过程的应用时，Executor进程除了运行task，还要负责写shuffle数据，给其他Executor提供shuffle数据。当Executor进程任务过重，导致GC而不

查看更多 →

MapReduce Action 功能描述 MapReduce任务节点，负责执行一个map-reduce任务。 参数解释 MapReduce Action节点中包含的各参数及其含义，请参见表1。 表1 参数含义 参数 含义 name map-reduce action的名称 resourceManager

查看更多 →

MapReduce Action 功能描述 MapReduce任务节点，负责执行一个map-reduce任务。 参数解释 MapReduce Action节点中包含的各参数及其含义，请参见表1。 表1 参数含义 参数 含义 name map-reduce action的名称 resourceManager

查看更多 →

创建MBM Space操作用户 公有云场景下，数字化制造云平台（MBM Space）使用的是OrgID用户进行登录。系统预置绑定站点的组织的创建者为系统超级管理员和默认租户的租户管理员。当您需要将服务给企业不同部门用户（员工）使用时，可以通过添加组织成员并授予MBM Space的操作权限实现。

查看更多 →

创建iDME操作用户（IAM授权） 在iDME中，iDME控制台、应用设计态、部署在体验版数据建模引擎上的应用运行态和数字主线引擎是基于IAM系统策略和自定义策略的授权，可以通过用户组功能实现IAM用户的授权。当您需要将相关资源分配给企业中不同的员工或者应用程序使用时，可以通过添加IAM账号实现。

查看更多 →

华为云培训有什么作用？ 参加华为云培训帮助您熟练地运用华为云的产品、技术、服务与解决方案；了解学习热门技术；也可以通过培训，有针对性地学习 华为云产品 知识，助力完成华为云认证。 父主题： 华为云培训常见问题

查看更多 →

过程就是shuffle。由于shuffle涉及到了磁盘的读写和网络的传输，因此shuffle性能的高低直接影响到了整个程序的运行效率。 下图清晰地描述了MapReduce算法的整个流程。 图3 算法流程 概念上shuffle就是一个沟通数据连接的桥梁，实际上shuffle这一部分

查看更多 →

MRS MapReduce 功能 通过MRS MapReduce节点实现在MRS中执行预先定义的MapReduce程序。 参数 用户可参考表1和表2配置MRS MapReduce节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文、英文字母、数

查看更多 →

使用External Shuffle Service提升Spark Core性能 操作场景 Spark系统在运行含shuffle过程的应用时，Executor进程除了运行task，还要负责写shuffle数据以及给其他Executor提供shuffle数据。当Executor进程任务过重，导致触发GC（Garbage

查看更多 →

me> 在 云审计 事件列表的“操作用户”一栏，可以查看对应事件的操作用户（user.name）信息。 本章节将介绍说明不同的操作用户身份在操作资源时，对应的事件列表中“操作用户”信息的示例，以方便用户更直观的理解操作用户信息。 IAM用户身份 操作用户为“IAM用户”时，审计日志中的user字段示例如下：

查看更多 →

触发器的作用是什么？ 答：触发器是一种特殊的存储过程，主要是通过事件来触发而被执行的。 可以强化约束，维护数据的完整性和一致性。 可以跟踪数据库内的操作，不允许未经许可的更新和变化。 可以联级运算。 父主题： FAQ

查看更多 →

触发器的作用是什么？ 答：触发器是一种特殊的存储过程，主要是通过事件来触发而被执行的。 可以强化约束，维护数据的完整性和一致性。 可以跟踪数据库内的操作，不允许未经许可的更新和变化。 可以联级运算。 父主题： FAQ

查看更多 →

运行Spark任务发现大量shuffle结果丢失 问题现象 Spark任务运行失败，查看任务日志发现大量打印shuffle文件丢失。 原因分析 Spark运行的时候会将临时产生的shuffle文件放在executor的临时目录中，方便后面获取。 而当某个executor异常退出时

查看更多 →

<filesize> <shuffle> db.table的形式是“数据库名.表名”，filesize为用户自定义的合并后平均文件大小（单位MB），shuffle是一个boolean值，取值true/false，作用是设置合并过程中是否允许数据进行shuffle。 例如：sh mergetool

查看更多 →

DES签名文件有什么作用？ 签名文件是服务单中磁盘的唯一标识，需要将其存入磁盘或Teleport存储系统的根目录。华为数据中心管理员收到磁盘或Teleport设备，并完成挂载或连线配置后，系统会根据签名文件自动匹配存储设备与服务单，避免人工干预带来的误操作。 父主题： 服务安全类

查看更多 →

开发MapReduce应用 MapReduce统计样例程序 MapReduce访问多组件样例程序 父主题： MapReduce开发指南（普通模式）

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 MapReduce REST API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →

开发MapReduce应用 MapReduce统计样例程序 MapReduce访问多组件样例程序 父主题： MapReduce开发指南（安全模式）

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 MapReduce REST API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →