Chapter 38
指定刷新时间(-d )
设备监控命令,以滚动条形式显示GPU设备统计信息。
GPU统计信息以一行的滚动格式显示,要监控的指标可以基于终端窗口的宽度进行调整。如果没有指定任何GPU,则默认监控所有GPU。
指定刷新时间(-d )
code
> nvidia-smi dmon -d 5
# gpu pwr gtemp mtemp sm mem enc dec mclk pclk
# Idx W C C % % % % MHz MHz
0 123 44 50 5 0 0 0 2619 1980
1 129 44 52 14 0 0 0 2619 1980
2 122 39 46 25 0 0 0 2619 1980
3 120 38 44 24 0 0 0 2619 1980
4 123 44 50 15 0 0 0 2619 1980
5 126 43 50 12 0 0 0 2619 1980
6 118 38 46 22 0 0 0 2619 1980
7 124 38 44 25 0 0 0 2619 1980
0 191 45 54 100 3 0 0 2619 1980
1 186 46 52 100 3 0 0 2619 1980
2 148 40 47 100 3 0 0 2619 1980
3 160 40 47 99 13 0 0 2619 1980
4 209 46 51 100 30 0 0 2619 1980
5 196 44 51 100 3 0 0 2619 1980
6 211 39 47 100 3 0 0 2619 1980
7 198 39 46 100 2 0 0 2619 1980
0 244 45 52 100 0 0 0 2619 1980
1 195 45 52 100 2 0 0 2619 1980
2 271 40 48 100 0 0 0 2619 1980
3 236 47 50 20 9 0 0 2619 1980
4 300 53 56 73 39 0 0 2619 1980
5 254 51 57 16 8 0 0 2619 1980
6 219 39 47 100 2 0 0 2619 1980
7 214 39 47 100 4 0 0 2619 1980指定要监控的GPU索引(-i)
code
nvidia-smi dmon -i 3 -d 5
# gpu pwr gtemp mtemp sm mem enc dec mclk pclk
# Idx W C C % % % % MHz MHz
3 234 40 45 100 5 0 0 2619 1980
3 120 38 44 16 0 0 0 2619 1980
3 182 39 45 100 3 0 0 2619 1980
3 246 39 45 100 0 0 0 2619 1980
# 多个GPU
nvidia-smi dmon -i 3,6 -d 5
# gpu pwr gtemp mtemp sm mem enc dec mclk pclk
# Idx W C C % % % % MHz MHz
3 141 39 45 100 7 0 0 2619 1980
6 143 38 46 100 5 0 0 2619 1980
3 139 40 47 51 5 0 0 2619 1980
6 143 39 48 24 23 0 0 2619 1980指定显示哪些监控指标(-s)
指定显示哪些监控指标(默认为puc)
- p:电源使用情况和温度(pwr:功耗,temp:温度)
- u:GPU使用率(sm:流处理器,mem:显存,enc:编码资源,dec:解码资源)
- c:GPU处理器和GPU内存时钟频率(mclk:显存频率,pclk:处理器频率)
- v:电源和热力异常
- m:FB内存和Bar1内存
- e:ECC错误和PCIe重显错误个数
- t:PCIe读写带宽
code
> nvidia-smi dmon -i 3 -d 1 -s put
# gpu pwr gtemp mtemp sm mem enc dec rxpci txpci
# Idx W C C % % % % MB/s MB/s
3 224 43 47 91 46 0 0 1968 1621
3 231 40 45 100 13 0 0 838 2025
3 169 41 46 11 6 0 0 4587 521
3 273 40 45 100 5 0 0 2016001 1765799
3 212 40 45 100 3 0 0 775 726
3 203 40 45 99 26 0 0 1572 601
3 128 39 45 0 0 0 0 110 111
3 120 39 44 0 0 0 0 101 116
3 179 45 48 100 20 0 0 321785 214053
3 289 47 49 88 7 0 0 1861316 199124
3 193 40 46 100 5 0 0 794 945
3 278 40 45 100 6 0 0 1910283 552
3 237 41 45 100 38 0 0 767 1548
3 214 41 46 99 20 0 0 107 122
3 132 39 45 0 0 0 0 102 112
3 120 39 44 0 0 0 0 105 117
3 136 44 47 95 14 0 0 40821 81122
3 323 42 47 90 28 0 0 1143 610
3 147 39 45 100 4 0 0 1138 855
3 224 40 45 100 8 0 0 501 580