로켓 과학만큼이나 쉬운가: 비유적 표현에서의 부정(Negation)을 해석하는 거대 언어 모델(LLM)의 능력 평가

요약

비유적 표현과 부정(Negation)이 결합된 텍스트를 LLM이 얼마나 정확하게 해석하는지 평가한 연구입니다. 새로운 주석 데이터셋을 개발하여 모델 성능을 테스트했으며, 프롬프트 스타일에 따라 성능 차이가 크게 나타남을 확인했습니다.

핵심 포인트

• 비유와 부정이 결합된 언어적 맥락의 난이도 분석
• 새로운 비유적 표현 주석 데이터셋 개발 및 활용
• 프롬프트 스타일에 따른 모델의 해석 성능 의존성 확인