MapReduce日志介绍 日志描述 日志默认存储路径： JobhistoryServer：“/var/log/Bigdata/mapreduce/jobhistory”（运行日志），“/var/log/Bigdata/audit/mapreduce/jobhistory”（审计日志）

查看更多 →

MapReduce日志介绍 日志描述 日志默认存储路径： JobhistoryServer：“/var/log/Bigdata/mapreduce/jobhistory”（运行日志），“/var/log/Bigdata/audit/mapreduce/jobhistory”（审计日志）

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 MapReduce REST API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 MapReduce REST API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →

Platform MPI 操作场景 该任务指导用户在BMS集群上运行Platform MPI应用（platform_mpi- 09.01.04.03r-ce.bin版本）。 前提条件 已配置BMS集群间互相免密登录。 集群中所有的BMS，均已安装Platform MPI。 操作步骤 关闭防火墙。

查看更多 →

export MPI_ROOT=/opt/ibm/platform_mpi export PATH=$MPI_ROOT/bin:$PATH export LD_LIBRARY_PATH=/opt/ibm/platform_mpi/lib/linux_amd64 export MPI_IB_PKEY=步骤2

查看更多 →

Intel MPI 操作场景 本节指导用户在ECS上安装和使用Intel MPI应用（以版本l_mpi_2018.0.128为例）。 前提条件 已配置弹性云服务器免密登录。 操作步骤 安装Intel MPI。 下载Intel MPI。 下载地址：https://software.intel

查看更多 →

Spectrum MPI 操作场景 本节指导用户安装和使用IBM Spectrum MPI（以IBM Spectrum MPI v10.1为例）。 其中，IBM Spectrum MPI v10.1版本当前支持的操作系统列表如下： IBM Spectrum MPI 10.1.0.1

查看更多 →

MPI安装 Platform MPI安装 PlatformMPI使用STAR-CCM+自带的，不需要安装。 OpenMPI安装（可选） 若使用STAR-CCM+自带的，可不用安装。 cd /root tar zxvf openmpi-4.0.1.tar.gz cd openmpi-4

查看更多 →

Intel MPI 操作场景 该任务指导用户在BMS集群上运行Intel MPI应用（l_mpi_2017.3.196版本）。 前提条件 已配置BMS集群间互相免密登录。 集群中所有的BMS，均已安装Spectrum MPI。 操作步骤 关闭防火墙。 登录集群中任意一台BMS。 执行以下命令，关闭BMS防火墙。

查看更多 →

Spectrum MPI 操作场景 该任务指导用户在BMS集群上运行Spectrum MPI应用（10.01.01版本）。 前提条件 已配置BMS集群间互相免密登录。 集群中所有的BMS，均已安装Spectrum MPI。 操作步骤 关闭防火墙。 登录集群中任意一台BMS。 执行以下命令，关闭BMS防火墙。

查看更多 →

MapReduce应用开发流程介绍 开发流程中各阶段的说明如图1和表1所示。 图1 MapReduce应用程序开发流程 表1 MapReduce应用开发的流程说明 阶段 说明 参考文档 了解基本概念 在开始开发应用前，需要了解MapReduce的基本概念。 MapReduce应用开发简介

查看更多 →

MapReduce Java API接口介绍 关于MapReduce的详细API可以直接参考官方网站上的描述：http://hadoop.apache.org/docs/r3.1.1/api/index.html 常用接口 MapReduce中常见的类如下： org.apache

查看更多 →

相关样例介绍请参见MapReduce统计样例程序。 MapReduce作业访问多组件的应用开发示例： 以MapReduce访问HDFS、HBase、Hive为例，介绍如何编写MapReduce作业访问多个服务组件。帮助用户理解认证、配置加载等关键使用方式。 相关样例介绍请参见MapReduce访问多组件样例程序。

查看更多 →

MapReduce应用开发流程介绍 开发流程中各阶段的说明如图1和表1所示。 图1 MapReduce应用程序开发流程 表1 MapReduce应用开发的流程说明 阶段 说明 参考文档 了解基本概念 在开始开发应用前，需要了解MapReduce的基本概念。 MapReduce应用开发简介

查看更多 →

MapReduce Java API接口介绍 关于MapReduce的详细API可以直接参考官方网站上的描述：http://hadoop.apache.org/docs/r3.1.1/api/index.html 常用接口 MapReduce中常见的类如下： org.apache

查看更多 →

相关样例介绍请参见MapReduce统计样例程序。 MapReduce作业访问多组件的应用开发示例： 以MapReduce访问HDFS、HBase、Hive为例，介绍如何编写MapReduce作业访问多个服务组件。帮助用户理解认证、配置加载等关键使用方式。 相关样例介绍请参见MapReduce访问多组件样例程序。

查看更多 →

MapReduce REST API接口介绍 功能简介 通过HTTP REST API来查看更多MapReduce任务的信息。目前Mapresuce的REST接口可以查询已完成任务的状态信息。完整和详细的接口请直接参考官网上的描述以了解其使用：http://hadoop.apache

查看更多 →

MapReduce REST API接口介绍 功能简介 通过HTTP REST API来查看更多MapReduce任务的信息。目前Mapresuce的REST接口可以查询已完成任务的状态信息。完整和详细的接口请直接参考官网上的描述以了解其使用：http://hadoop.apache

查看更多 →

安装和使用MPI 弹性云服务器场景支持使用的MPI IB驱动自带的OpenMPI 社区OpenMPI Spectrum MPI Intel MPI Platform MPI 父主题： 弹性云服务器场景典型应用

查看更多 →

下载Intel MPI。 下载地址：https://software.intel.com/en-us/intel-mpi-library 执行以下命令，解压并安装Intel MPI。 以l_mpi_2018.0.128.tgz为例： # tar -xvf l_mpi_2018.0.128.tgz

查看更多 →