最新动态

更新时间:2024/10/29 GMT+08:00

本文介绍了MapReduce服务 MRS各特性版本的功能发布和对应的文档动态,欢迎体验。

2024年10月

序号

功能名称

功能描述

阶段

相关文档

1

云服务授权支持变更权限委托

MRS云服务授权支持手动变更权限委托,同意授权后,将按照您所勾选的委托和策略, 系统将创建mrs_service_agency、mrs_cluster_agency或mrs_admin_agency委托并进行授权。

商用

配置MRS云服务授权

2024年09月

序号

功能名称

功能描述

阶段

相关文档

1

优化MRS用户指南

MRS用户指南手册目录结构及章节内容优化:

  • 重新设计手册大纲,更加符合MRS使用逻辑习惯。
  • 按照用户业务场景重新优化章节标题,提升内容可搜索性。
  • 聚合管理控制台及集群Manager操作指导,同一集群运维任务参考一个章节,避免多次跳转。

商用

《用户指南》

2024年07月

序号

功能名称

功能描述

阶段

相关文档

1

优化MRS快速入门

MRS快速入门手册优化:

  • 优化标题,新增ClickHouse集群创建使用指导。
  • 场景入门案例中嵌入操作视频,方便新手用户快速上手产品。
  • 增加入门实践列表,快速查阅MRS各场景实践案例。

商用

快速创建和使用ClickHouse列式数据库集群

快速创建和使用Kafka流式数据处理集群

MRS入门实践

2024年01月

序号

功能名称

功能描述

阶段

相关文档

1

新增IAM同步管理接口

新增IAM同步管理接口,包含以下功能:

  • 获取已经同步的IAM用户和用户组。
  • 将IAM用户和用户组同步到Manager。
  • 指定IAM用户、用户组取消同步。

商用

IAM同步管理接口

2023年12月

序号

功能名称

功能描述

阶段

相关文档

1

新增弹性伸缩相关接口

新增弹性伸缩相关接口,包含以下功能:

  • 查看指定集群的所有的弹性伸缩策略信息。
  • 更新弹性伸缩策略。
  • 删除弹性伸缩策略。
  • 创建弹性伸缩策略。

商用

弹性伸缩接口

2023年10月

序号

功能名称

功能描述

阶段

相关文档

1

IAM用户同步支持指定用户

MRS集群内同步IAM用户时,支持指定用户或用户组进行同步。

商用

IAM用户同步MRS说明

2023年08月

序号

功能名称

功能描述

阶段

相关文档

1

计费说明完善

细化计费模式,新增计费概述、计费样例、费用账单、成本管理等章节。

商用

计费概述

2023年07月

序号

功能名称

功能描述

阶段

相关文档

1

新增热门组件样例工程运行编译快速入门指导

新增ClickHouse,Flink,HBase,HDFS,Hive HCatalog,Hive JDBC,Kafka,Spark等组件的应用开发快速入门指导,提供MRS样例工程导入及编译的实践案例。

商用

MRS组件应用开发快速入门

2

新增SDK参考

介绍了MRS服务提供的SDK语言版本,列举了最新版本SDK的获取地址。

商用

SDK概述

2023年06月

序号

功能名称

功能描述

阶段

相关文档

1

新增MRS组件客户端使用实践

新增MRS热门组件客户端使用快速入门实践,便于用户快速了解MRS集群认证、连接操作。

商用

各组件客户端使用实践

2

MRS帮助视频丰富

新增MRS常见使用场景的操作演示视频、ClickHouse组件知识培训视频、组件应用开发样例工程导入及开发调测演示视频。

商用

视频帮助

2023年05月

序号

功能名称

功能描述

阶段

相关文档

1

上线MRS 3.2.0-LTS.1版本。

MRS 3.2.0-LTS.1版本主要变更:

  • 新增CDL、IoTDB组件。
  • 部分组件内核升级:ClickHouse、Flink、Hadoop及Hudi组件内核升级。

商用

组件操作指南

组件版本一览表

2023年03月

序号

功能名称

功能描述

阶段

相关文档

1

上线MRS 3.1.5版本

MRS 3.1.5版本主要变更:

  • 部分组件内核升级:Hudi、CarbonData、Flink、Spark及Zookeeper组件内核升级。
  • 新增“集群外客户端访问OBS”功能。
  • 配置弹性伸缩规则时,支持配置资源池维度策略。

商用

组件版本一览表

集群外客户端访问OBS

配置资源池维度策略

2023年01月

序号

功能名称

功能描述

阶段

相关文档

1

MRS集群配置弹性策略时支持配置生效日期。

用户可以根据实际需求设置资源计划的生效日期。

商用

配置MRS集群弹性伸缩

2

新增查看告警详情功能。

用户需要查看告警详情时,可以通过该功能快速实现。

商用

查看告警列表

2022年05月

序号

功能名称

功能描述

阶段

相关文档

1

MRS支持LTS版集群

LTS版:

  • 除支持集群基础操作外,还提供版本升级能力。
  • 支持多可用区部署。
  • 支持HetuEngine组件。

商用

从零开始使用HetuEngine

2022年03月

序号

功能名称

功能描述

阶段

相关文档

1

多Master节点规格升级

增加多Master节点规格升级的使用条件。

商用

升级Master节点规格

2022年02月

序号

功能名称

功能描述

阶段

相关文档

1

MRS支持包周期集群的节点退订

用户可以根据业务需求量,通过指定节点对集群进行缩容,以使MRS拥有更优的存储、计算能力,降低运维成本。

商用

退订包周期集群指定节点

2021年09月

序号

功能名称

功能描述

阶段

相关文档

1

自定义节点域名规则

创建MRS集群过程中,支持用作自定义主机名前缀,用作集群中ECS机器或BMS机器主机名的前缀。

商用

自定义购买集群

2021年07月

序号

功能名称

功能描述

阶段

相关文档

1

ClickHouse组件版本升级到21.3.4.25,支持数据重分布

ClickHouse节点扩容后,数据迁移可以使得ClickHouse集群内数据达到均衡。

商用

使用ClickHouse数据迁移工具

2

MRS支持Hudi组件

Hudi是数据湖的文件组织层,对Parquet格式文件进行管理提供数据湖能力,支持多种计算引擎,提供IUD接口,在 HDFS的数据集上提供了插入更新和增量拉取的流原语。

商用

Hudi基本原理

Hudi快速入门

2021年03月

序号

功能名称

功能描述

阶段

相关文档

1

下线MRS 2.1.0版本

请选择MRS 3.1.0版本进行购买。

商用

MRS组件版本一览表

2

下线MRS 1.8.10版本

请选择MRS 1.9.2版本进行购买。

商用

MRS组件版本一览表

3

缩容指定节点

当主机故障且不再需要时,使用该功能删除故障的主机,删除主机时组件的角色实例不会执行退服操作,删除前请确保节点中的数据已完成备份。

商用

缩容指定节点

2020年11月

序号

功能名称

功能描述

阶段

相关文档

1

支持ClickHouse集群

MRS 3.x版本支持创建ClickHouse集群,具备平滑扩容、HA、鲲鹏加持、灵活配置、简单运维、安全可靠等能力。

商用

ClickHouse基本原理

快速购买ClickHouse集群

从零开始使用ClickHouse

ClickHouse开发指南

2

全新大数据组件升级

MRS 3.x版本针对开源组件进行了大面积升级,提供最新能力,并在社区基础上对功能、性能、可靠性等方面进行了增强。

商用

MRS组件版本一览表

2020年09月

序号

功能名称

功能描述

阶段

相关文档

1

支持多种异构虚拟机规格

MRS集群支持x86/ARM混合部署,支持弹性云服务器(ECS)和裸金属服务器(BMS)混合部署 。

商用

自定义购买集群

2

新增V2创建集群接口

V2接口功能更强大、操作更便捷,在接口功能相同的情况下,推荐您优先使用V2接口。

商用

创建集群

2020年08月

序号

功能名称

功能描述

阶段

相关文档

1

支持IAM账户与集群用户自动同步

将绑定MRS相关策略的IAM用户同步至MRS系统中,创建同用户名、不同密码的账号,用于集群管理。同步之后,用户可以使用IAM用户名(密码需要Manager的管理员admin重置后方可使用)登录Manager管理集群。

商用

IAM用户同步MRS

2020年07月

序号

功能名称

功能描述

阶段

相关文档

1

新增获取指定目录文件列表接口

支持在MRS集群中通过接口获取指定目录文件列表。

商用

获取指定目录文件列表

2020年06月

序号

功能名称

功能描述

阶段

相关文档

1

支持自定义集群拓扑

MRS新增“自定义”类型集群,用户可以自主定义集群的进程实例在集群节点中的部署方式。

商用

创建自定义拓扑集群

2020年03月

序号

功能名称

功能描述

阶段

相关文档

1

MRS支持Presto HA能力

MRS支持为大规格的集群默认安装Presto多实例,即一个Core/Task节点上安装多个Worker实例,分别为Worker1,Worker2,Worker3… ,多个Worker实例共同与Coordinator交互执行计算任务,相比较单实例,能够大大提高节点资源的利用率和计算效率。

商用

Presto简介

2

MRS支持Tez组件

Tez是Apache最新的支持DAG作业的开源计算框架,它可以将多个有依赖的作业转换为一个作业从而大幅提升DAG作业的性能。如果 Hive和Pig这样的项目使用Tez而不是MapReduce作为其数据处理的骨干,那么将会显著提升它们的响应时间,Tez构建在YARN之上,能够不需要做任何改动地运行MR任务。

商用

Tez简介

3

MRS支持Alluxio组件

Alluxio是一个面向基于云的数据分析和人工智能的数据编排技术。在MRS的大数据生态系统中,Alluxio 位于计算和存储之间,为包括 Apache Spark、Presto、Mapreduce 和 Apache Hive的计算框架提供了数据抽象层,使上层的计算应用可以通过统一的客户端API和全局命名空间访问包括HDFS和OBS在内的持久化存储系统,从而实现了对计算和存储的分离。

商用

Alluxio简介

4

MRS支持Ranger组件

Apache Ranger提供一个集中式安全管理框架,并解决授权和审计。它可以对整个Hadoop生态中如HDFS、Hive、HBase、Kafka、Storm等进行细粒度的数据访问控制。用户可以利用Ranger提供的前端WebUI控制台通过配置相关策略来控制用户对这些组件的访问权限 。

商用

Ranger简介