本文へスキップ

GPUメトリクス

DCGM Exporterを通じて収集されるNVIDIA GPUメトリクスの一覧です。GPU収集方式とサイドカーパターンについては、動作環境 > NVIDIA GPUドキュメントを参照してください。

MetricTypeUnitDescription
DCGM_FI_DEV_GPU_UTILgauge%GPUコアが演算処理を実行していた時間の割合。
DCGM_FI_PROF_GR_ENGINE_ACTIVEgaugeratioグラフィックスエンジン(3D/Compute)がアクティブだった時間の割合。
DCGM_FI_PROF_SM_ACTIVEgaugeratio1つ以上のワープ(Warp)がアクティブだったサイクルの割合。
DCGM_FI_PROF_SM_OCCUPANCYgaugeratioSM(Streaming Multiprocessor)の占有率(SMあたりの常駐ワープ数の割合)。
DCGM_FI_PROF_PIPE_TENSOR_ACTIVEgaugeratioテンソルコア(HMMA)パイプがアクティブだったサイクルの割合。
DCGM_FI_PROF_DRAM_ACTIVEgaugeratioメモリインタフェースがアクティブ(データの送受信)だったサイクルの割合。
DCGM_FI_DEV_FB_USEDgaugeMiB使用中のフレームバッファ(VRAM)メモリ。
DCGM_FI_DEV_FB_FREEgaugeMiB使用可能なフレームバッファ(VRAM)メモリ。
DCGM_FI_DEV_FB_TOTALgaugeMiBフレームバッファ(VRAM)メモリの総量。
DCGM_FI_DEV_FB_USED_PERCENTgauge%使用中のフレームバッファ(VRAM)メモリの割合。
DCGM_FI_DEV_FB_RESERVEDgaugeMiB予約済みのフレームバッファメモリ。
DCGM_FI_PROF_PCIE_TX_BYTEScounterbytePCIeバスを通じて送信(Host → Device)した総データ量。
DCGM_FI_PROF_PCIE_RX_BYTEScounterbytePCIeバスを通じて受信(Device → Host)した総データ量。
DCGM_FI_DEV_POWER_USAGEgaugeW現在のGPUの消費電力。
DCGM_FI_DEV_GPU_TEMPgauge°CGPUチップの現在の温度。
DCGM_FI_DEV_SM_CLOCKgaugeMHzSM(Streaming Multiprocessor)のクロック周波数。
DCGM_FI_DEV_MEM_CLOCKgaugeMHzメモリのクロック周波数。
DCGM_FI_DEV_PSTATEgaugeP-State現在のGPUの性能状態(P0が最高)。
DCGM_FI_DEV_ECC_SBE_AGG_TOTALcountercount累積したシングルビット(Single-Bit)永久ECCエラー数。
DCGM_FI_DEV_ECC_DBE_AGG_TOTALcountercount累積したダブルビット(Double-Bit)永久ECCエラー数。

次のメトリックが追加されました。

MetricTypeUnitDescription
DCGM_FI_DEV_WEIGHTED_GPU_UTILgaugeratioGPU使用率を、デバイスが占有するスライスの割合で加重した値。

MIG環境と非MIG環境のGPU使用率を同じ基準で合算するためのメトリックです。MIGプロファイルは物理GPUの一部のみを占有するため、使用率をそのまま加算するとGPU単位の総量と一致しません。

算出方式はcalculation_methodラベルで区分します。

ValueDescription
weighted_sumMIGインスタンス。DCGM_FI_PROF_GR_ENGINE_ACTIVEにスライスの割合(compute_slices / DCGM_FI_DEV_MIG_MAX_SLICES)を掛けて合算
direct非MIG GPU。DCGM_FI_DEV_GPU_UTILを100で割った値
prof_gr_engine_activeH100、H200、H800、H20系列の非MIG GPU。DCGM_FI_PROF_GR_ENGINE_ACTIVEの値をそのまま使用
  • 値の範囲は0から1までです。
  • DCGM_FI_DEV_GPU_UTILが100を超える異常値は、100に制限してから計算します。
  • GPU UUIDはDCGM_FI_DEV_UUIDラベルで一緒に提供します。