SpeechEQ: 사회적 인지 능력을 갖춘 음성 대화 모델의 정서 지능 지수(EQ) 벤치마킹

요약

Speech-Language Models(SLMs)의 사회적 인지 능력을 평가하기 위한 새로운 벤치마크 프레임워크인 SpeechEQ를 소개합니다. 기존 평가 방식의 한계를 넘어 다회차 대화에서의 교차 모달 추론 능력을 측정하며, 현재 멀티모달 모델들이 겪는 기술적 병목 현상을 분석합니다.

핵심 포인트

• EQ-i 2.0 이론 기반 15가지 정서 지능 하위 척도 적용
• 2,265개의 검증된 다회차 대화 데이터셋 구축
• 엔드투엔드 모델이 계층형 시스템보다 성능 면에서 우수함 확인
• 모달리티 지름길, 안전 함정, 맥락적 망각 등 주요 한계점 규명