GenPT: 생성적 투사 검사를 통한 신뢰할 수 있는 LLM 심리 측정의 자기 보고 방식 초월

요약

기존 자기 보고식 설문지의 오염 및 편향 문제를 해결하기 위해 투사 패러다임을 활용한 GenPT 프레임워크를 제안합니다. GenPT는 생성적 자극을 통해 LLM 에이전트의 심리 상태를 보다 신뢰성 있게 측정하며, 기존 방식보다 높은 타당도를 보여줍니다.

핵심 포인트

• 기존 설문 방식의 학습 데이터 오염 및 사회적 바람직성 편향 문제 지적
• TAT, Rorschach 등 투사 검사를 재구성한 3단계 GenPT 파이프라인 제안
• GenPT가 기존 설문지 대비 높은 신뢰도와 타당도를 가짐을 벤치마킹
• 자살 충동 및 우울증 평가 등 민감한 시나리오에서 GenPT의 우수성 입증