AI助手›服务器性能

服务器性能

2026-11-05 · GPU 与风扇实时监控
未 未登录
GPU:读取中… 模型:qwen2.5-7b 检测中… 最后更新:--
推理速度
--tok/s
正在读取 GPU 时钟…
推理服务器实时状态
模型状态检测中…
驱动:--
检测中
正在读取 nvidia-smi …
① GPU 核心温度Core Temp
--℃
阈值读取中…
② HBM 显存温度Memory Temp
--℃
阈值读取中…
③ SM 核心频率Clock
--MHz
读取中…
④ GPU 功耗Power Draw
--W
上限读取中…
⑤ 显存占用VRAM Used
--GB
读取中…
⑥ GPU 利用率Utilization
--%
推理是脉冲式波动;满载本身不是问题,满载时掉频才要查
⑦ 性能状态标记Throttle
--
  • 读取中…
读取位掩码…
⑧ 距降频余量Headroom
--℃
核心温度距离热降频阈值还剩几度
近期趋势 服务端每轮刷新采样一点(所有人共享),最多保留 120 点;关掉页面后历史仍会累积一会儿
机箱风扇 · 转速与档位 V100 是被动散热,靠机箱风扇吹;转速来自 OMSA,档位经 iDRAC 设置(转速每 15 秒缓存一次)
当前档位:-- MinimumFanSpeed:-- GPU 风扇读数:--
风扇转速状态
读取中…
机箱温度探针读数状态
读取中…
档位说明:255 = 出厂默认(iDRAC 按自身温控曲线调速,噪音最低);0~100 = 强制最低转速百分比, 100 即全速。全速很吵,建议只在排查高温 / 降频时临时使用,验证完点「恢复出厂默认」。 每次调节都会写入审计日志(E:\ai_deploy\fan_audit.log),含操作时间与来源 IP。
判定口径阈值可在根 web.config 的 appSettings 调整
指标预警降频 / 严重说明
GPU 核心温度> 80℃ ≥ 83℃ 降频 / > 85℃ 严重 本机实测在 83℃ 触发 SW Thermal Slowdown,时钟被压到最低档;同一张卡 1380MHz 时 76 tok/s,被压到 255MHz 后只剩 21 tok/s
HBM 显存温度≥ 80℃≥ 85℃ 显存常常先于核心过热:核心 78℃ 时显存可能已到 85℃ 并触发降频
SM 核心频率< 标称 90%< 标称 55% 标称 1380 MHz。空闲时(利用率≤5% 且功耗<35% 上限)时钟低属正常省电,不判降频,否则页面在没人用时一直飘红
功耗≥ 上限 90%
或「报了功耗制动但不到 50%」
≥ 上限 98% 达上限是满载时的正常保护;远没到上限却报功耗制动,才是供电异常(查 8-pin 是否插紧、是否用转接头、是否共用电轨)
显存占用≥ 85%≥ 95% qwen2.5-7b 常驻时的显存占用见上方 ⑤ 卡片;未常驻时每次提问都要冷加载十几秒
GPU 利用率—— 推理就是脉冲式波动,满载 90%+ 是正常状态、不参与告警;只有「满载 + 时钟掉下来」才说明被压制
性能状态标记Slowdown ActiveThermal / Power 来自 nvidia-smi 的 clocks_throttle_reasons.active 位掩码;本页会区分是「热墙」还是「功耗墙」,两者处理办法完全不同
⑧ 距降频余量≤ 3℃≤ 0℃(已到阈值) 核心温度距降频阈值还剩几度。余量只有 1~2℃ 时,哪怕当前全绿,一场批量推理就会把速度打掉,属「看着正常但不耐跑」