通过这个接口，可以查询当前集群中已完成的MapReduce任务，并且可以得到表1 表1 常用信息 参数 参数描述 submitTime 任务提交时间 startTime 任务开始执行时间 finishTime 任务执行完成时间 queue 任务队列 user 提交这个任务的用户 state 任务执行成功或失败

查看更多 →

MapReduce性能调优 多CPU内核下MapReduce调优配置 配置MapReduce Job基线 MapReduce Shuffle调优 MapReduce大任务的AM调优 配置MapReduce任务推测执行 通过Slow Start调优MapReduce任务 MapReduce任务commit阶段优化

查看更多 →

MapReduce性能调优 多CPU内核下的MapReduce调优配置 配置MapReduce Job基线 MapReduce Shuffle调优 MapReduce大任务的AM调优 配置MapReduce任务推测执行 通过Slow Start调优MapReduce任务 MapReduce任务commit阶段优化

查看更多 →

什么是MapReduce服务 大数据是人类进入互联网时代以来面临的一个巨大问题：社会生产生活产生的数据量越来越大，数据种类越来越多，数据产生的速度越来越快。传统的数据处理技术，比如说单机存储，关系数据库已经无法解决这些新的大数据问题。为解决以上大数据处理问题，Apache基金会推

查看更多 →

MapReduce应用开发流程介绍 开发流程中各阶段的说明如图1和表1所示。 图1 MapReduce应用程序开发流程 表1 MapReduce应用开发的流程说明 阶段 说明 参考文档 了解基本概念 在开始开发应用前，需要了解MapReduce的基本概念。 MapReduce应用开发简介

查看更多 →

educer抽象类实现。 main方法提供建立一个MapReduce job，并提交MapReduce作业到hadoop集群。 代码样例 下面代码片段仅为演示，具体代码参见com.huawei.bigdata.mapreduce.examples.FemaleInfoCollector类：

查看更多 →

MapReduce应用开发流程介绍 开发流程中各阶段的说明如图1和表1所示。 图1 MapReduce应用程序开发流程 表1 MapReduce应用开发的流程说明 阶段 说明 参考文档 准备开发环境 在进行应用开发前，需首先准备开发环境，推荐使用Java语言进行开发，使用IntelliJ

查看更多 →

准备MapReduce开发环境 在进行应用开发时，要准备的开发和运行环境如表1所示。 表1 开发环境 准备项 说明 操作系统 开发环境：Windows系统，支持Windows 7以上版本。 运行环境：Windows系统或Linux系统。 如需在本地调测程序，运行环境需要和集群业务平面网络互通。

查看更多 →

当前 MRS 提供以下MapReduce相关样例工程： 表1 MapReduce相关样例工程 样例工程位置 描述 mapreduce-example-security MapReduce统计数据的应用开发示例： 提供了一个MapReduce统计数据的应用开发示例，通过类CollectionMa

查看更多 →

educer抽象类实现。 main方法提供建立一个MapReduce job，并提交MapReduce作业到hadoop集群。 代码样例 下面代码片段仅为演示，具体代码参见com.huawei.bigdata.mapreduce.examples.FemaleInfoCollector类：

查看更多 →

ring类型的参数，命名为outputValue。如无需要，则无需添加参数。 图8 添加输出信息 单击“异常处理”，配置执行出现错误后的行为：终止整个作业或执行下一个步骤。 图9 添加异常处理 单击“确定”，完成当前原子动作的配置。 父主题： 原子动作

查看更多 →

执行记录 脚本工单 作业工单 补丁工单 资源操作工单 父主题： 任务管理

查看更多 →

执行重构 在代码编辑器中，将光标放在要内联变量使用的地方上。 在编辑器上下文菜单中，选择“重构”>“内联变量”或按 “Ctrl+Alt+N”。 父主题： 内联变量

查看更多 →

执行重构 在代码编辑器上，将光标放在要提取的表达式上。 在编辑器上下文菜单中，选择“重构”>“引入变量”或按 “Ctrl+Alt+V” / “Shift+Alt+L”。 如果多个表达式属于重构范围，请在出现的弹出窗口中选择所需的表达式。 在打开的对话框中，提供引入变量的名称。 父主题：

查看更多 →

执行重构 在代码编辑器中，将光标放在要重命名的符号的用法或声明上。 在编辑器上下文菜单中，选择“重命名符号”，或按 “F2” / “Shift+Alt+R” / “Shift+F6”（IDEA快捷键）。 在出现的弹出窗口中，为符号提供所需的新名称。 父主题： 变量重命名

查看更多 →

在“可信联邦学习”页面，查找待执行的作业，单击“执行”，系统自动跳转到“历史作业”页面。 图1 执行作业 等待执行完成，在“历史作业”页面查看对应的执行结果、作业报告。作业报告展示作业详细信息，包括作业输入条件、输出结果、执行环境、合作方信息和模型贡献度等。 图2 展示作业报告 执行纵向作业 用户登录进入计算节点页面。

查看更多 →

执行sql 点击diapi连接器名称进入连接器详情页面，选"执行动作"，创建执行动作，封装执行sql的执行动作 基本信息： 根据执行sql接口的请求参数，配置输入： 输出参数即为接口的响应参数，可以配置为空： 保存，可在执行动作列表查看到刚创建的执行动作 父主题： 封装diapi的执行动作

查看更多 →

函数执行 FunctionGraph函数的执行需要多长时间？ FunctionGraph函数的执行包含了哪些过程？ FunctiongGraph函数的并发处理过程是什么？ FunctiongGraph函数如何处理长时间不执行的实例？ 首次访问函数慢，如何优化？ 怎样获取在函数运行过程中实际使用了多少内存？

查看更多 →

执行导出 导出操作语法 执行数据导出语法： 1 INSERT INTO [foreign table 表名] SELECT * FROM [源表名]; 执行导出数据示例 示例1：将表product_info_output的数据通过外表product_info_output_ext导出到数据文件中。

查看更多 →

errorMessage String 系统提示信息。 执行成功时，字段可能为空。 执行失败时，用于显示错误信息。 errorCode String 系统提示信息。 执行成功时，字段可能为空。 执行失败时，用于显示错误码。 jobId String 执行算法任务ID。请求失败时，该字段为空。 说明：

查看更多 →

执行SQL后，在窗口下方可查看历史SQL执行记录及当前执行信息。 图3 查看执行记录 单击“消息”页签，可获取SQL语句的执行情况和执行影响范围，数据的进度及耗时信息。 图4 查看消息 在“结果集”页签下，您可以查看SQL语句的执行结果详情。 图5 查看结果集 您也可以对结果集进行表1中的操作。 表1 操作列表

查看更多 →