下面是“Linux下监视NVIDIA的GPU使用情况详解”的完整攻略：

Linux下监视NVIDIA的GPU使用情况详解

介绍

在Linux系统中，我们可以通过一些命令和工具来监视NVIDIA的GPU使用情况。这些信息对于开发GPU加速的应用程序很有用，可以优化程序性能，并避免程序运行时出现各种问题。

下面我们将介绍一些常用的命令和工具，帮助你在Linux系统中监视NVIDIA的GPU使用情况。

nvidia-smi

nvidia-smi是NVIDIA提供的一款命令行工具，可以实时监视NVIDIA GPU的状态和使用情况。

使用nvidia-smi命令，可以实时获得GPU的使用情况信息，包括GPU的总体使用情况、各个进程的占用情况、GPU的温度、电源使用情况、显存等信息。

例如，我们可以执行以下命令来查看GPU的使用情况：

nvidia-smi

执行该命令后，我们将得到类似如下的输出：

Mon Apr  5 19:01:50 2021       
+-----------------------------------------------------------------------------+
| NVIDIA-SMI 450.102.04   Driver Version: 450.102.04   CUDA Version: 11.0     |
|-------------------------------+----------------------+----------------------+
| GPU  Name        Persistence-M| Bus-Id        Disp.A | Volatile Uncorr. ECC |
| Fan  Temp  Perf  Pwr:Usage/Cap|         Memory-Usage | GPU-Util  Compute M. |
|                               |                      |               MIG M. |
|===============================+======================+======================|
|   0  Tesla V100-PCIE...  On   | 00000000:17:00.0 Off |                    0 |
| N/A   51C    P0    50W / 250W |      0MiB / 16130MiB |      0%      Default |
|                               |                      |                  N/A |
+-------------------------------+----------------------+----------------------+

+-----------------------------------------------------------------------------+
| Processes:                                                                  |
|  GPU   GI   CI        PID   Type   Process name                  GPU Memory |
|        ID   ID                                                   Usage      |
|=============================================================================|
+-----------------------------------------------------------------------------+

可以看到，输出结果中包含GPU的详细状态信息，以及当前正在运行的GPU程序的PID和显存使用情况。

nvtop

nvtop是一款基于ncurses库的GPU系统监控工具，可以实时监视和记录NVIDIA GPU的使用情况和性能指标。

使用nvtop命令，可以实时查看GPU的使用信息、CPU使用信息、显存使用情况等指标。当然，它也可以像nvidia-smi一样显示当前正在运行的GPU程序的PID和显存使用情况。

例如，我们可以执行以下命令来运行nvtop：

nvtop

运行该命令后，我们将进入nvtop监视界面。在该界面中，我们可以看到GPU的使用情况、CPU使用情况、显存使用情况等信息，以及当前正在运行的GPU程序的PID和显存使用情况。

结论

在Linux系统中，我们可以使用nvidia-smi和nvtop命令来监视NVIDIA的GPU使用情况。通过这些命令和工具，我们可以实时了解GPU的状态和使用情况，以便优化应用程序性能。