회전에 따른 유사도 기반 위치 인코딩(Similarity-based Positional Encoding)의 강건성: 이론적 분석 및 실험적 검증

요약

유사도 기반 위치 인코딩(simPE)의 회전 강건성을 이론적·실험적으로 분석한 연구입니다. simPE가 회전 불변은 아니지만, 특정 조건 하에서 회전 섭동에 대해 안정적임을 증명하고 다양한 데이터셋을 통해 기존 방식보다 우수한 성능을 입증했습니다.

핵심 포인트

• simPE의 회전 섭동에 대한 이론적 안정성 증명
• 프로베니우스 노름 기반의 명시적 섭동 경계 도출
• 회전 상황에서 기존 학습된 위치 인코딩 대비 우수한 성능 확인
• 의료 영상 등 기하학적 강건성이 중요한 분야에 유용