LLM 은 신체화된 인지와 문화적 변이를 포착하는가? 지시대명사에서의 초국적 증거
요약
본 연구는 지시대명사(demonstratives)를 활용하여 대형 언어 모델(LLMs)이 신체화된 인지 및 문화적 관습을 진정으로 습득했는지 평가합니다. 영어와 중국어의 공간 표현 비교 분석 결과, 인간은 근접-원격 구별과 관점 취하기 능력에서 각 언어별 고유한 패턴을 보였습니다. 그러나 최첨단 LLMs들은 이러한 기본적인 공간 지식이나 문화적 차이를 이해하지 못하고 영어 중심의 추론에 의존하는 한계를 드러냈습니다.
핵심 포인트
- 지시대명사 기반 탐침은 LLM의 신체화된 인지 및 문화적 관습 평가를 위한 새로운 방법론을 제시합니다.
- 인간 화자는 언어별로 근접-원격 지시와 관점 취하기 능력에서 독특한 패턴(예: 영어 vs. 중국어)을 보였습니다.
- 최신 LLMs들은 기본적인 공간적 추론이나 문화적 차이를 이해하지 못하고, 영어 중심의 일반화된 방식으로 작동하는 한계를 가집니다.
- 이 연구는 모델 설계 시 개인차와 언어별 맥락(cultural variation)을 고려해야 할 필요성을 제기합니다.
대형 언어 모델 (LLMs) 이 텍스트를 통해 진정한 의미의 신체화된 인지 (embodied cognition) 와 문화적 관습을 습득하는가? 우리는 영어의 'this/that'와 중국어의 'zhè/nà'와 같은 기본적인 공간 표현인 지시대명사 (demonstratives) 를 근거지식 (grounded knowledge) 을 평가하기 위한 새로운 탐침으로 소개한다. 320 명의 원어민이 제공한 6,400 건의 응답을 분석하여 인간 기준선을 확립했다. 그 결과, 영어 화자는 근접-원격 지시체 (proximal-distal referents) 를 신뢰할 수 있게 구분하지만 관점 취하기 (perspective-taking) 에 어려움을 겪는 반면, 중국어 화자는 관점을 유창하게 전환하면서도 원격 모호성 (distal ambiguity) 을 허용하는 것으로 나타났다. 이에 반해, 최첨단 5 개의 LLM 은 근접-원격 대비를 내재적으로 이해하지 못하며 문화적 차이를 보이지 않고 영어 중심의 추론에 의존했다. 본 연구는 다음과 같은 기여를 한다: (i) 신체화된 인지와 문화적 관습을 평가하는 새로운 렌즈로 작용하는 지시대명사 기반의 새로운 작업; (ii) 인간 해석에서의 초문화적 비대칭성에 대한 경험적 증거; (iii) 자기중심-사회중심 논쟁에 대한 새로운 관점, 두 가지 방향성이 공존하지만 언어마다 다르게 나타남을 보여줌; 그리고 (iv) 향후 모델 설계에서 개인차를 해결해야 할 필요성 제기이다.
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.CL의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기