범위는 줄었으나 위협은 여전하다: 2026년 프론티어 모델 코호트를 통한 LLM 패키지 환각 (Hallucination) 재평가

요약

최신 프론티어 코드 생성 LLM들을 대상으로 패키지 이름 환각 현상을 재평가한 결과, 환각률은 이전 연구보다 낮아졌으나 여전히 보안 위협이 존재함을 확인했습니다. 특히 여러 모델이 공통적으로 생성하는 환각 패키지 이름들이 발견되어, 모델에 관계없이 발생하는 공급망 공격(slopsquatting)의 위험성을 경고합니다.

핵심 포인트

• 최신 프론티어 모델들의 패키지 환각률은 약 4.62%에서 6.10% 사이로 측정됨
• 다양한 모델이 공통적으로 생성하는 127개의 환각 패키지 이름이 식별되어 모델 불가지론적(model-agnostic) 공격 표면 형성
• DeepSeek V3.2와 GPT-5.4-mini 사이의 높은 Jaccard 유사도를 통해 학습 데이터의 유사성 가능성 시사
• Anthropic 모델군 내에서 모델 크기에 따른 환각 성능 역전 현상 관찰