更新时间:2025-08-05 GMT+08:00

MRS on CCE使用指南

首次使用MRS on CCE

在购买MapReduce(简称MRS) on CCE集群之前,您需要了解MRS on CCE的基本概念及支持的组件,详细介绍请参见了解MRS on CCE简介、支持的组件

购买MRS on CCE集群

MRS on CCE支持按需购买集群,您可以自定义集群类型、组件范围、节点CPU架构类型、节点实例的规格、日志地址、元数据对接配置、数据库默认路径、可用区、VPC网络信息等,MRS on CCE将为您自动创建一个符合配置的集群,具体介绍请参见购买MRS on CCE集群

  • MRS on CCE集群创建成功后,可提交相关作业,支持提交以下类型的作业:
    • Spark:基于内存进行计算的分布式计算框架,MRS on CCE支持提交SparkSubmit、Spark Script和Spark SQL作业。
    • Flink:提供一个分布式大数据处理引擎,可对有限数据流和无限数据流进行有状态计算,MRS on CCE支持提交Flink 、Flink SQL作业。
    • Ray:基于Python的分布式计算框架,MRS on CCE支持提交RayCluster 、RayService和RayJob任务。
    • HetuEngine:支持通过DBeaver提交HetuEngine作业到MRS on CCE交互式分析集群运行,并且可在HetuEngine WebUI中查看作业信息。
  • 当用户使用集群过程中出现问题需要运维人员协助解决时,可通过开启集群的“日志授权”功能,授予运维人员访问用户存放作业日志的OBS并行文件系统的权限,以查看故障日志便于定位问题。