ROCm과 PyTorch의 호환성 문제에 대한 사용자 경험 공유.
작성자는 RX 7900XTX를 사용해 ROCm 환경에서 PyTorch를 테스트해 보았고, 상당한 문제를 겪었다고 보고했다. 특히, 코드에서 backward() 호출 시 NaN 문제가 발생했으며, 다양한 방법을 시도했지만 해결되지 않았다. 반면, nanoGPT 훈련 스크립트는 문제없이 실행되었다. 결론적으로 ROCm은 여전히 잘 알려지지 않은 코드에서 불안정한 성능을 보이고 있다고 평가하였다.
User shares experience with issues of ROCm compatibility with PyTorch.
The author tested ROCm with PyTorch using an RX 7900XTX and faced significant issues, particularly encountering NaN errors when calling backward() in their code. Despite trying various adjustments, they could not resolve the issues, although the nanoGPT training script ran fine. Ultimately, they concluded that ROCm remains fragile with less common codebases.