Nemotron 3.5 Super VL 모델에 대한 평가

요약

본 글은 Nemotron 3.5 Super VL 모델을 포함한 여러 LLM의 지식 기반 추론 능력을 비교 평가합니다. 특히 잘 알려지지 않은 게임 규칙 같은 니치 정보에 대한 환각(Hallucination) 경향을 테스트했습니다. Nemotron 3.5 Super VL이 다른 모델 대비 큰 개선을 보여, 부정확함에서 사소한 실수 수준으로 향상된 점을 강조하며 높은 성능을 입증했습니다.

핵심 포인트

• Nemotron 3.5 Super VL은 니치 지식 추론에서 상당한 개선을 보임.
• 다른 주요 LLM들(GPT-OSS, Qwen 등)은 게임 규칙 같은 정보에서 환각 경향이 높음.
• Nemotron 모델 자체는 RTX 5060 Ti와 DDR5 메모리를 사용하여 높은 처리 속도를 보여줌.
• Gemma 4 31B IT QAT 역시 뛰어난 성능을 가진 것으로 평가됨.