更新时间:2024-03-12 GMT+08:00

Alluxio

Alluxio是一个面向基于云的数据分析和人工智能的数据编排技术。在MRS的大数据生态系统中,Alluxio位于计算和存储之间,为包括Apache Spark、Presto、Mapreduce 和Apache Hive的计算框架提供了数据抽象层,使上层的计算应用可以通过统一的客户端API和全局命名空间访问包括HDFS和OBS在内的持久化存储系统,从而实现了对计算和存储的分离。

图1 Alluxio架构

优势:

  • 提供内存级 I/O 吞吐率,同时降低具有弹性扩张特性的数据驱动型应用的成本开销
  • 简化云存储和对象存储接入
  • 简化数据管理,提供对多数据源的单点访问
  • 应用程序部署简易

有关Alluxio的详细信息,请参见:https://docs.alluxio.io/os/user/stable/cn/Overview.html