监控计算资源池
在日常运维工作中,管理员需要实时掌握计算资源池的运行状态,了解CPU、内存、NPU、GPU的使用率情况。
通过可视化监控,管理员可以:
- 直观了解资源池中各类资源的实时使用情况。
- 判断是否需要进行资源池的扩缩容操作。
- 优化资源管理,避免资源浪费或不足。
- 保障业务稳定,及时发现资源瓶颈。
查看资源池监控
- 登录AI DataLake管理控制台。
- 在左侧导航栏,单击“运维监控 > 资源监控”。
- 选择“计算资源”页签,在资源池监控页面中,可查看当前工作空间下,计算资源池的资源使用信息。
如果当前工作空间未购买计算资源池,则不显示计算资源监控数据,可以单击“立即购买资源”,并参考购买预留资源池进行创建。
表1 资源池监控指标 指标名称
监控指标
单位
描述
CPU使用率
CPU_USAGE
%
当前计算资源池CPU使用量占CPU总核数的比例。
内存使用率
MEM_USAGE
%
当前计算资源池内存使用量占内存总容量的比例。
内存总容量
MEM_TOTAL
GiB
当前计算资源池内存容量总和。
内存分配量
MEM_ALLOCATED
GiB
当前计算资源池中已分配的内存量。
内存分配率
MEM_ALLOCATED_RATE
%
当前计算资源池已分配的内存量占内存总容量的比例。
GPU总卡数
GPU_TOTAL_CARD
卡
当前计算资源池的GPU总卡数。
GPU算力分配量
GPU_ALLOCATED_CARD
卡
当前计算资源池中已分配的GPU卡数量。
GPU算力分配率
GPU_ALLOCATED_RATE
%
当前计算资源池已分配的GPU卡数量占GPU总卡数量的比例。
GPU算力使用率
GPU_USAGE
%
当前计算资源池实际使用GPU卡数占被分配的GPU卡数的比例。
GPU显存使用率
GPU_MEM_USAGE
%
当前计算资源池实际使用GPU显存占被分配的GPU显存的比例。
NPU总卡数
NPU_TOTAL_CARD
卡
当前计算资源池的NPU总卡数。
NPU算力分配量
NPU_ALLOCATED_CARD
卡
当前计算资源池中已分配的NPU卡数量。
NPU算力分配率
NPU_ALLOCATED_RATE
%
当前计算资源池已分配的NPU卡数量占NPU总卡数量的比例。
NPU算力使用率
NPU_USAGE
%
当前计算资源池实际使用NPU卡数占被分配的NPU卡数的比例。
NPU显存使用率
NPU_MEM_USAGE
%
当前计算资源池实际使用NPU显存占被分配的NPU显存的比例。
- 您可以通过配置监控参数,查看计算资源池的实时运行状态,满足不同场景下的监控需求。
- 选择监控数据统计周期:支持近1小时、近6小时、近1天、近7天、近30天,您也可以选择自定义周期,但最长是30天。在界面右上角您可以选择按分钟、按小时或者按天的维度查看图表,图表数据会按照所选聚合粒度计算平均值呈现。
- 监控数据统计周期为近1小时/6小时,监控图表内的数据周期最小为1分钟。
- 监控数据统计周期为近1天/7天,监控图表内的数据周期最小为1小时,图表不支持按分钟呈现。
- 监控数据统计周期为近30天,监控图表内的数据周期最小为1天,图表不支持按分钟或者按小时呈现。
- 自定义监控数据统计周期最大选择30天,超过1天时监控图表内的数据周期最小为1小时,超过7天时监控图表内的数据周期最小为1天。
- 选择计算资源池:选择需要查看的资源池。
- 选择页面刷新频率:可按需选择手动刷新、1分钟和5分钟。
- 选择监控数据统计周期:支持近1小时、近6小时、近1天、近7天、近30天,您也可以选择自定义周期,但最长是30天。在界面右上角您可以选择按分钟、按小时或者按天的维度查看图表,图表数据会按照所选聚合粒度计算平均值呈现。