요약

본 논문은 온라인 그룹 채팅과 같은 다자간 환경에서 발생하는 암묵적 사회적 규범 및 그에 따른 제재 메커니즘에 초점을 맞춘 'SCENE'이라는 소셜 상호작용 벤치마크를 소개합니다. SCENE은 숨겨진 규범을 따르는 스크립트화된 페르소나들로 구성된 현실적인 비역할극 시나리오를 생성하여, 주체 에이전트가 해당 규범을 위반하는 상황을 인위적으로 조성하고 평가할 수 있게 합니다.

핵심 포인트

• 온라인 그룹 채팅은 암묵적 행동 패턴과 사회적 제재가 존재하는 복잡한 사회적 공간이다.
• LLM 기반 에이전트의 규범 인식 및 적응 능력은 아직 충분히 탐구되지 않은 연구 영역이다.
• SCENE 벤치마크는 다자간 채팅 환경의 암묵적 규범과 사회적 제재에 초점을 맞춘 소셜 상호작용 평가 도구이다.
• 이 벤치마크는 숨겨진 규범을 가진 페르소나를 활용하여, 에이전트가 규범 위반 기회를 경험하도록 설계되었다.