SemEval-2026 Task 8 우승팀은 심사위원 주도 앙상블 사용

요약

SemEval-2026 Task 8의 우승팀인 RaguTeam이 GPT-4o-mini를 기반으로 인스턴스당 7개의 다양한 LLM을 조합하는 '심사위원 주도 앙상블(Judge-led Ensemble)' 방식을 사용하여 대회에서 최고 성과를 거두었습니다. 이들의 접근 방식은 단순히 크기가 큰 초대형 모델들(120B급)의 성능을 능가했습니다. 또한, RaguTeam은 대규모 모델들과 경쟁할 수 있는 고성능 7B 전문 모델인 Meno-Lite-0.1도 공개하여 연구 커뮤니티에 기여했습니다.

핵심 포인트

• LLM 경진대회에서 '심사위원 주도 앙상블' 전략이 초대형 모델을 능가하는 강력한 성능을 입증했다.
• GPT-4o-mini와 같은 효율적인 소형/중형 LLM을 핵심으로 사용하여 높은 성능을 달성할 수 있다.
• 7B급 전문화된 경량 모델(예: Meno-Lite-0.1)이 대규모 모델과 경쟁 가능한 수준의 성능을 보여주었다.
• 연구 결과와 사용 코드를 공개하여 커뮤니티에 기여하고 실질적인 연구 방법론을 제시했다.