谁在占着显存
每台机器的显卡、显存、CPU、内存与磁盘占用,每分钟采集一次。显存条按进程分段,一眼看出是谁的哪个任务在吃卡。
右侧是机柜内的服务器与指示灯。这块看板上的每一格显存,都对应其中某台机器里正在运行的一个进程;条形图上的每一段都是一个真实的 pid。
计算节点
点击任一节点查看显卡明细与占用进程
每台机器的显卡、显存、CPU、内存与磁盘占用,每分钟采集一次。显存条按进程分段,一眼看出是谁的哪个任务在吃卡。
右侧是机柜内的服务器与指示灯。这块看板上的每一格显存,都对应其中某台机器里正在运行的一个进程;条形图上的每一段都是一个真实的 pid。
点击任一节点查看显卡明细与占用进程
每一条显存、每一颗 CPU 都来自上面这些机柜里的真实硬件。上报的进程归属取自 nvidia-smi 的 compute-apps 输出与 /proc 的属主信息,因此条形图上的每一段都对应一个真实运行的 pid。 当有人提交训练任务时,这块看板会在一分钟内显示他的用户名与显存占用。