Nanbeige4.3 33B, 한국어 문서 RAG 299문항 직접 채점: 공식 벤치마크에선 qwen3.8 27B를 이겼지만 한국...

요약

오픈 모델 Nanbeige4.3 33B의 한국어 문서 RAG 성능을 직접 측정했습니다. 공식 벤치마크와 달리, 실제 한국어 QA 환경에서는 qwen3.8 27B 등 경쟁 모델 대비 낮은 정답률을 보였습니다. 특히 토큰 한계로 인한 답변 누락 및 반복 현상이 관찰되어 실질적인 활용에 어려움이 있었습니다.

핵심 포인트

• Nanbeige4.3의 한국어 RAG 성능은 공식 벤치마크와 차이가 있음.
• 실제 한국어 QA 환경에서 qwen3.8 27B 등 경쟁 모델 대비 정답률이 낮음.
• 토큰 한계(Context Window)로 인한 답변 누락 및 반복 문제가 발생함.
• 모델의 우위는 영어/중국어 기반 코딩 및 자동화 영역에 집중되어 있음.