MemArtsCC与其他组件的关系
MemArtsCC与OBS的关系
Hadoop-OBS提供一种新的InputStream:OBSMemArtsCCInputStream,该InputStream从部署在计算侧上的MemArts集群读取数据,从而减少OBS服务端压力,提升数据读取性能的目标。
MemArtsCC会将数据持久化存储到计算侧的存储中(SSD),Hadoop-OBS对接MemArtsCC有如下使用场景:
MemArtsCC与Spark的关系
Spark从OBS读取数据,OBSA会从MemartsCC读取数据,如果命中则读本地缓存,否则触发预取。