SEA-NLI: 동남아시아 문화적 이해를 들여다보는 렌즈로서의 자연어 추론 (Natural Language Inference)
요약
동남아시아 문화권의 이해도를 측정하기 위한 새로운 NLI 벤치마크인 SEA-NLI를 소개합니다. 8개국 언어를 대상으로 실험한 결과, 기존 모델들이 문화적 지식 부족으로 인해 지식 집약적 분야에서 낮은 성능을 보임을 확인했습니다.
핵심 포인트
- 동남아시아 8개국 언어를 포함한 네이티브 NLI 벤치마크 SEA-NLI 제안
- 기존 LLM들이 동남아시아 문화적 맥락에서 낮은 성능을 보임
- 지식 집약적 카테고리에서 특히 성능 저하가 두드러짐
- 문화 인지 프롬프팅이 성능 향상에 효과적임을 입증
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.CL (NLP)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기0