Unsloth 대 GSQ-RCO - 512K 컨텍스트 DeepSeek-V4.1 GGUF 벤치마크 터미널 벤치

요약

DeepSeek UD 버전 3.1 GGUF를 사용한 Unsloth는 512K 컨텍스트 환경에서 DeepSWE, Terminal Bench 등 다양한 에이전트 스타일 벤치마크를 실행했습니다. 이 결과, 기존의 GSQ-RCO 대비 전반적으로 우수한 성능을 입증하며 여러 개선된 채점기와 대규모 데이터(35.1B 토큰) 기반의 검증 과정을 거쳤습니다.

핵심 포인트

• DeepSeek-V4.1은 GSQ-RCO보다 벤치마크에서 10~20% 더 우수한 성능을 보임.
• 에이전트 작업에는 512K 컨텍스트를, 일반 작업에는 128K 컨텍스트를 사용함.
• 데이터 노이즈 감소를 위해 총 35.1B 토큰의 대규모 벤치마킹을 수행함.
• GSQ-RCO가 주장하는 일부 복구율은 통계적 검정 결과 거의 불가능함을 제시함.