허위 정보 위협 완화를 위해 오픈 소스 LLM을 활용하는 멀티 에이전트 시스템 (Multi-Agentic System)

현대 사회에서 허위 정보 (disinformation)의 위협은 전자 통신, 소셜 미디어의 확산, 그리고 인공지능 (AI)의 발전으로 인해 우려스러운 수준에 도달했습니다. 그 결과, 이러한 위협을 완화하기 위한 효과적인 대응책을 개발해야 할 긴급한 필요성이 제기되고 있습니다. 그러나 문제의 규모가 너무 방대하여 수동 팩트 체크 (fact-checking) 및 인간 기반의 검증만으로는 불충분하며, 이는 허위 정보를 탐지하고 반박하기 위한 자동화된 방법의 필요성을 강조합니다. 본 논문은 허위 정보 탐지 작업에 참여하는 인간 주석가 (human annotators)의 의사 결정 과정을 모방하는 멀티 에이전트 시스템 (multi-agent system) 기반의 새로운 접근 방식을 제안합니다. 인간 주석가의 행동에서 영감을 얻은 합의 메커니즘 (consensus mechanism), 인지의 다양성 (diversity in cognition), 지식의 다양성 (diversity in knowledge), 그리고 계층적 구조 (hierarchical structure)를 통합함으로써, 제안된 방법은 GPT 4 및 GPT 3.5를 포함한 개별 대규모 언어 모델 (LLMs)과 비교하여 우수한 결과를 달성합니다. 이 시스템은 더 큰 투명성을 보장하기 위해 오픈 모델 (예: LLaMA, Kimi, Qwen, Deepseek 및 LLaMA-Nemotron)을 활용합니다. 제안된 방법의 평가는 영어 (고자원), 폴란드어 (중자원), 슬로바키아어 (저자원), 불가리아어 (저자원)를 포함하여 자원 가용성이 다양한 언어의 데이터셋을 포괄합니다. 실험은 직접적인 허위 정보 탐지, 검증 가치가 있는 텍스트 식별, 그리고 검증 가능한 사실적 주장 (verifiable factual claims)을 포함하는 텍스트 탐지와 같은 작업에 대해 수행되었습니다.