태그: #DCGM

← 전체 글

• GPU Operator 파드 구성요소와 역할, 호스트에 드라이버가 없어도 되는가

  GPU Operator 를 설치하면 어떤 파드가 어느 노드에 뜨고 각각 무슨 일을 하는지, 파드들이 어떤 순서로 서로를 기다리는지, 호스트에 NVIDIA 드라이버가 없어도 오퍼레이터만으로 동작하는지를 실제 파드 구성과 공식 문서로 확인해 정리합니다.

  2026-10-07 · 17 분 읽기 #GPU Operator#Kubernetes#NVIDIA 드라이버#디바이스 플러그인#Container Toolkit

• DCGM exporter 지표 전부 해부: 실제로 나오는 18개와 나오지 않는 것

  테스트 환경의 dcgm-exporter 에서 실제로 받아 온 지표 18개를 하나씩 설명하고, 이 GPU 에서 나오지 않는 지표(프로파일링, XID, NVLink)와 그 이유를 로그로 확인합니다. 지표 값의 해석 함정도 정리합니다.

  2026-10-07 · 17 분 읽기 #DCGM#dcgm-exporter#GPU 모니터링#Prometheus#GPU Operator

• GPU 하드웨어·드라이버 장애 진단

  DCGM 지표, XID 코드, ECC·NVLink·스로틀링·PCIe 강등, 느린 GPU 하나가 전체를 늦추는 현상을 NVIDIA 공식 문서 기준으로 정리하고 쿠버네티스의 격리·자동 복구·알림 설계로 잇습니다. 필자의 실험 환경은 소비자용 GPU 뿐이라 XID·ECC 장애를 겪은 기록이 없으며, 소비자용 GPU 에서 지표가 빠지는 모습을 실측 출력으로 보여 줍니다.

  2026-10-07 · 32 분 읽기 #DCGM#XID#ECC#NVLink#스로틀링