동일한 10개의 Terminal-Bench 태스크에서 DeepSeek-V4 (IQ2/FP8)와 Qwen 3.6 27B 테스트 — Qwen이

요약

DeepSeek-V4와 Qwen 3.6 27B 모델을 대상으로 Terminal-Bench 2.0을 활용한 성능 비교 실험을 진행했습니다. 실험 결과, 풀 프리시전(Full-precision)으로 구동된 Qwen 3.6 27B 로컬 모델이 심하게 양자화된 플래그십 모델보다 에이전트 작업에서 우수한 성능을 보일 수 있음을 확인했습니다.

핵심 포인트

• Qwen 3.6 27B 로컬 모델이 고난도 병렬 처리 태스크를 유일하게 통과함
• 2-bit IQ2 양자화 모델이 FP8 API 모델과 유사한 성능을 유지함
• 풀 프리시전 중소형 모델이 양자화된 대형 모델을 능가할 가능성 제시
• 단일 시도 실험으로 인한 통계적 유의성 및 샘플링 변수 통제 한계 존재