更新时间:2024-08-03 GMT+08:00

MapReduce应用开发流程介绍

开发流程中各阶段的说明如图1表1所示。

图1 MapReduce应用程序开发流程
表1 MapReduce应用开发的流程说明

阶段

说明

参考文档

了解基本概念

在开始开发应用前,需要了解MapReduce的基本概念。

MapReduce应用开发简介

准备开发和运行环境

使用IntelliJ IDEA工具,请根据指导完成开发环境配置。

MapReduce的运行环境即MapReduce客户端,请根据指导完成客户端的安装和配置。

准备MapReduce开发和运行环境

准备工程

MapReduce提供了不同场景下的样例程序,您可以导入样例工程进行程序学习。或者您可以根据指导,新建一个MapReduce工程。

导入并配置MapReduce样例工程

(可选)创建MapReduce样例工程

准备安全认证

如果您使用的是安全集群,需要进行安全认证。

配置MapReduce应用安全认证

根据场景开发工程

提供了样例工程。

帮助用户快速了解MapReduce各部件的编程接口。

开发MapReduce应用

编译并运行程序

指导用户将开发好的程序编译并提交运行。

调测MapReduce应用

查看程序运行结果

程序运行结果会写在用户指定的路径下。用户还可以通过UI查看应用运行情况。

调测MapReduce应用