쉬엄쉬엄블로그

이 색깔은 주석이라 무시하셔도 됩니다. 공포의 단어 OOM (Out Of Memory) 하드웨어 환경에 따라 가장 흔하게 마주할 수 있는 에러 OOM이 해결하기 어려운 이유들… 왜 발생했는지 알기 어려움 어디서 발생했는지 알기 어려움 Error backtracking이 이상한 곳으로 감 메모리의 이전 상황 파악이 어려움 우선 시도해보기 : Batch Size ↓ → GPU clean → RUN 그 외에 발생할 수 있는 문제들… GPUUtil 사용하기 nvidia-smi처럼 GPU의 상태를 보여주는 모듈 Colab은 환경에서 GPU 상태를 보여주기 편함 iter마다 메모리가 늘어나는지 확인!! torch.cuda.empty_cache() 써보기 사용되지 않은 GPU상 cache를 정리 가용 메모리를 확보 ..