(AI) 군중의 지혜: 대규모 언어 모델(LLM)에서의 인공 군집 지능(Artificial Swarm Intelligence) 조사
요약
LLM을 활용한 인공 군집 지능(Artificial Swarm Intelligence)의 효과를 조사한 연구입니다. GPT-5, Gemini 2.5 Pro, Claude Sonnet 4.5를 대상으로 실험한 결과, 모델 내/간 집계를 통해 추정 오차를 최대 37% 감소시킬 수 있음을 확인했습니다.
핵심 포인트
- LLM의 모델 내 및 모델 간 집계를 통한 오차 감소 확인
- 다양한 집계 전략에 따라 MAPE 최대 37%p 개선
- LLM의 불확실성 평가와 메타인지적 인식 간의 상관관계 발견
- 조직 의사결정을 위한 LLM 군집 활용 가능성 제시
인간 군집 지능(Human swarm intelligence)은 놀라운 집단적 정확성을 보여주지만, 비용, 조정(coordination), 시간 측면에서 확장성 제약에 직면해 있습니다. 본 연구에서는 대규모 언어 모델(LLMs)이 인공 군집(artificial swarms)을 통해 군집 지능 효과를 근사할 수 있는지 조사하며, AI 기반 집계 메커니즘(aggregation mechanisms)을 이해하는 데 있어 중요한 공백을 다룹니다. 우리는 세 가지 독점 모델(GPT-5, Gemini 2.5 Pro, Claude Sonnet 4.5)을 대상으로 8가지 추정 작업(estimation tasks)에 대해 모델 내 샘플링(intra-model sampling)과 모델 간 집계(inter-model aggregation)를 테스트하며, 960개의 수동 실행 프롬프트를 사용하여 통제된 실험을 수행했습니다. 결과에 따르면, 모델 내 및 모델 간 집계를 통해 일관된 오차 감소가 나타났으며, 다양한 집계 전략에 따라 MAPE(Mean Absolute Percentage Error)에서 최대 37퍼센트 포인트의 유의미한 오차 감소가 확인되었습니다. 우리는 상대적 신뢰 구간 너비(relative confidence interval widths)와 상대적 추정 오차(relative estimation errors) 사이의 양의 상관관계(Spearman's $ρ=0.242-0.568$, 모든 $p<0.001$)에서 작거나 큰 효과 크기(effect sizes)를 관찰했으며, 이는 LLM이 불확실성을 평가할 때 메타인지적 인식(metacognitive awareness)을 보유하고 있음을 시사합니다. 우리는 연구 및 실무에 대한 시사점을 논의하며, 조직의 의사결정에 LLM 군집(LLM swarms)을 배치하기 위한 실행 가능한 통찰력을 제공합니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.AI의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기