更新时间:2024-12-11 GMT+08:00
配置HetuEngine对接MemArtsCC
操作场景
本章节介绍在存算分离场景下如何配置HetuEngine任务中集成MemArtsCC缓存,MemArtsCC会将热点数据存储在计算侧集群,可以起到降低OBS服务端带宽的作用,利用MemArtsCC的本地存储,访问热点数据不必跨网络,可以提升HetuEngine的数据读取效率。
前提条件
- Guardian服务正常,且已开启存算分离,具体请参考配置Guardian服务对接OBS。
- 已完成HetuEngine对接OBS,具体请参考配置HetuEngine通过Guardian访问OBS。
- HetuEngine对接MemArtsCC当前仅支持EulerOS和银河麒麟操作系统。
修改HetuEngine配置
- 登录FusionInsight Manager,选择“集群 > 服务 > HetuEngine > 配置 > 全部配置 > HetuEngine(服务) > OBS”。
- 在参数“fs.obs.readahead.policy”中配置参数值为“memArtsCC”。
- 单击“保存”,在弹窗页面中单击“确定”,保存配置。单击“概览”,选择“更多 > 滚动重启服务”,重启HetuEngine服务,并滚动重启所有计算实例。
验证配置结果
- 登录FusionInsight Manager,选择“集群 > 服务 > MemArtsCC > 图表 > 容量”。
- 查看图表“集群shard数量” 并记录shard数。
- 使用HetuEngine创建一个的OBS表并进行查询,具体请参考配置HetuEngine通过Guardian访问OBS。
- 重新执行1~2,查看“集群shard数量”,shard数量较2上升,则表示对接成功。
父主题: 使用MemArtsCC