어텐션 신경망을 해석 가능한 하드 로직 술어 회로로 변환하는 방법: 진리표 술어 추출 및 테세우스의 배 교체 원리에 따른 상태 기계 병합
요약
본 논문은 훈련된 어텐션 네트워크 전체를 해석 가능한 하드 로직 술어 회로(hard-logic predicate circuit)로 변환하는 방법을 제안합니다. 이 회로는 최소화된 진리표와 테세우스의 배 교체 원리를 사용하여 상태 기계를 병합하며, 승산기나 가중치 트래픽 없이 비트 단위로 하드웨어 기술 설명(HDL)에 재현 가능합니다. FPGA 카드에서 구현 시, GPU 대비 2~3 자릿수 빠른 추론 속도를 달성하는 것이 주요 성과입니다.
핵심 포인트
- 어텐션 네트워크를 해석 가능한 하드 로직 술어 회로로 변환함.
- 진리표 최소화와 테세우스 원리를 이용해 상태 기계를 병합하여 효율성을 높임.
- FPGA 기반 구현 시, GPU 대비 2~3 자릿수 빠른 추론 속도를 달성함.
- 하드웨어 기술 설명(HDL)을 통해 비트 단위로 재현 가능하며 승산기가 필요 없음.
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.AR의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기