nvidia-smi（NVIDIA System Management Interface）是一个命令行实用程序，用于监控和管理NVIDIA GPU（图形处理器）的状态和性能。它提供了一个简单而强大的方式来获取有关GPU的实时信息，这些信息包括GPU的使用情况、温度、内存占用等。以下是对nvidia-smi输出中常见字段的解释：

基本输出信息

• 时间戳：显示输出信息获取的时间。
• NVIDIA-SMI 版本：表示当前使用的NVIDIA系统管理接口的版本。
• 驱动版本：显示当前安装的NVIDIA显卡驱动的版本号。
• CUDA 版本：表示当前系统支持的CUDA的最高版本号，CUDA是NVIDIA推出的用于通用计算的并行计算平台和API模型。
• GPU 名称：显示显卡的型号。
• GPU 工作模式：如WDDM（Windows Display Driver Model），表示Windows系统下的显示驱动模型。
• GPU 总线ID：显示显卡在PCI总线上的ID。
• Display Active：表示GPU的显示是否初始化。
• ECC（Error-Correcting Code）：显示是否开启错误检查和纠正技术，N/A表示不可用。

GPU 状态信息

• 风扇转速（Fan）：显示风扇的转速，范围从0%到100%。N/A表示没有风扇。
• 温度（Temp）：显示GPU的温度，单位摄氏度。
• 性能状态（Perf）：从P0（最高性能）到P8（最低性能或空闲状态），表示GPU当前的性能模式。
• 功耗（Pwr: Usage/Cap）：显示GPU当前的功耗和最大功耗能力，单位是瓦特（W）。
• 显存使用情况（Memory-Usage）：显示GPU当前使用的显存和总显存，单位是兆字节（MiB）。
• GPU 利用率（Volatile GPU-Util）：显示GPU的当前负载情况，单位是百分比（%）。

其他信息

• 计算模式（Compute M.）：显示GPU的计算模式，包括默认模式、独占进程模式等。
• 进程信息（Processes）：列出正在使用GPU的进程及其显存占用情况。包括进程ID（PID）、进程类型（Type，如G表示图形进程，C表示计算进程）、进程名称（Process name）和显存使用情况（GPU Memory）。

高级功能和命令

• 定期更新显示：使用nvidia-smi -l [SECONDS]命令，可以每隔指定秒数更新一次GPU设备的信息。
• CSV格式输出：使用nvidia-smi --format=csv命令，可以将信息以更易于处理和分析的CSV格式输出。
• 设备监控：使用nvidia-smi dmon命令，可以以滚动条形式显示GPU设备统计信息，包括电源消耗、流处理器利用率、显存利用率等。
• 查询特定GPU信息：使用nvidia-smi -i [GPU_ID]命令，可以查询指定GPU设备的详细信息。

通过nvidia-smi，用户可以直观地了解显卡的各项运行指标，从而更好地管理和优化显卡的使用。无论是进行性能监测、配置管理还是故障诊断，nvidia-smi都是一个非常有用的工具。

动态显示gpu运行情况

可运行如下指令：-n表示间隔0.5秒运行一次nvidia-smi

watch -n 0.5 nvidia-smi