Insights

Exo-GPU: Tensor Core를 위한 안전하고 명령형이며 사용자 스케줄링 가능한 프로그래밍

본 논문은 GPU 프로그래밍의 복잡성을 해결하기 위해 Exo-GPU라는 새로운 명령형, 저수준 언어를 제안합니다. 기존 방식들이 안전성이나 추상화 중 하나를 포기하는 문제를 지적하며, Exo-GPU는 병렬성과 동기화를 단순 주석으로 처리하여 성능 엔지니어에게 명시적인 제어권을 제공하면서도 순차-병렬 등가성을 검증할 수 있게 합니다. 이를 통해 H100 GPU의 GEMM 커널을 구현하여 높은 성능을 입증했습니다.