更新时间:2022-12-02 GMT+08:00

如何快速使用MRS

MRS是一个在华为云上部署和管理Hadoop系统的服务,一键即可部署Hadoop集群。MRS提供租户完全可控的企业级大数据集群云服务,轻松运行Hadoop、Spark、HBase、Kafka等大数据组件。

MRS使用简单,通过使用在集群中连接在一起的多台计算机,您可以运行各种任务,处理或者存储(PB级)巨量数据。

MRS的基本使用流程如下:

  1. 通过MRS管理控制台购买集群,用户可以指定集群类型用于离线数据分析和流处理任务,也可以指定集群中预置的弹性云服务器实例规格、实例数量、数据盘类型(高 IO、超高 IO)、要安装的组件等。
  2. 开发数据处理程序,MRS的开发指南为用户提供代码示例和教程,帮助您快速开始开发自己的程序并正常运行。
  3. 上传准备好的程序和数据文件到对象存储服务(OBS)或者集群内的HDFS文件系统中。
  4. 集群创建成功后,可直接添加作业,执行由用户自身开发的程序或者SQL语句,进行数据的处理与分析。
  5. MRS为用户提供企业级的大数据集群的统一管理平台,帮助用户快速掌握服务及主机的健康状态,通过图形化的指标监控及定制及时的获取系统的关键信息,根据实际业务的性能需求修改服务属性的配置,对集群、服务、角色实例等实现一键启停等操作。
  6. 如果作业执行结束后不再需要集群,可以快速删除MRS集群。集群删除后不再产生费用。