인간-AI 팀워크에서의 성공적인 협력 측정: 인지된 협력성 및 팀워크 인식 척도의 개발과 검증

인간-AI 협력이 점차 보편화됨에 따라, 협력적 인간-AI 상호작용의 주관적 품질을 평가하기 위한 신뢰할 수 있는 도구가 필요합니다. 우리는 연동 활동 이론 (joint activity theory) 에 기반한 인지된 협력성 척도 (Perceived Cooperativity Scale, PCS) 와 진화적 협력 이론 (evolutionary cooperation theory) 에 기반한 팀워크 인식 척도 (Teaming Perception Scale, TPS) 라는 두 가지 이론적으로 근거가 있는 척도를 소개합니다. PCS 는 단일 상호작용 시퀀스 내에서 에이전트가 인지하는 협력 능력과 실천을 포착하고, TPS 는 상호 기여와 지원에서 비롯되는 팀워크의 발생적 느낌을 포착합니다. 두 척도 모두 인간-인간 협력을 위해 적응되어 에이전트 간 비교를 가능하게 합니다. 협력 카드 게임, LLM 상호작용, 의사결정 지원 시스템을 아우르는 세 가지 연구 (N = 409) 에서 차원성, 신뢰도, 타당성에 대한 분석을 통해 두 척도가 다양한 협력 품질을 가진 협력 파트너들을 성공적으로 구분했으며, 기대에 부합하는 구성 타당성을 보였음을 나타냈습니다. 이러한 척도들은 광범위한 인간-AI 협력 맥락에서 경험적 조사와 시스템 평가를 위한 기초를 제공합니다.