GPU 利用率

Posted

技术标签:

【中文标题】GPU 利用率【英文标题】:GPU Utilization 【发布时间】:2013-05-13 03:19:27 【问题描述】:

我一直在使用 NVML 库来获取图形和内存利用率的值 罗迪尼亚基准套件。我观察到,对于不同的频率,同一应用程序的利用率显示出不同的值。从 wiki 链接http://en.wikipedia.org/wiki/CPU_usage 看来,它似乎没有考虑到内存、分支等各种停顿。在一个时间间隔内,这种利用率到底是什么?以及它的值是如何随着频率的变化而变化的。

谢谢

【问题讨论】:

【参考方案1】:

利用率的定义见nvml documentation,p90:

8.12 nvmlUtilization_t Struct Reference
#include <nvml.h>
Data Fields
• unsigned int gpu
Percent of time over the past second during which one or more kernels was executing on the GPU.
• unsigned int memory
Percent of time over the past second during which global (device) memory was being read or written.

如果您更改应用程序时钟,给定工作负载的利用率可能会有所不同(我假设这就是您所说的 frequency 的意思)。

例如,如果 GPU 核心时钟运行得更快,那么工作负载的处理可能会发生变化,完成工作负载所需的时间可能会更短。

【讨论】:

以上是关于GPU 利用率的主要内容,如果未能解决你的问题,请参考以下文章

GPU MHZ 利用率

如何查看GPU占用率和显存占用率

由于占用率低而说GPU处于利用率低下是啥意思?

GPU 利用率

优化调参提升GPU和CPU的利用率

nvidia-smi 结果中如何定义 GPU 和内存利用率?