The SWE-bench Verified leaderboard on @huggingface now compares almost 50

요약

SWE-bench의 Verified 리더보드가 이제 거의 50개의 모델을 비교하며 커뮤니티 기반으로 확장되었습니다. 이는 폐쇄형 벤치마킹보다 더 많은 참여자와 데이터를 통해 개선된 신호를 제공합니다. 이 업데이트는 여러 주요 AI 모델들을 경쟁시키는 장을 마련했습니다.

핵심 포인트

• SWE-bench Verified 리더보드가 대폭 확장되어 약 50개의 다양한 모델을 비교할 수 있게 되었습니다.
• 커뮤니티 기반의 벤치마킹 방식이 폐쇄형(closed) 벤치마킹보다 더 신뢰성 높고 풍부한 데이터를 제공합니다.
• 주요 AI 플레이어들(@deepseek_ai, @Kimi_Moonshot 등)이 이 리더보드에 참여하며 경쟁하고 있습니다.