swe-verified 벤치마크의 일부를 사용하여 로컬 모델과 다양한 양자화 (quants) / 설정을 비교했습니다

요약

swe-verified 벤치마크를 활용하여 로컬 모델의 다양한 양자화 설정 및 파인튜닝 모델의 성능을 비교 분석했습니다. 수집된 데이터와 시각화 자료를 통해 베이스 모델별 성능 차이를 확인할 수 있습니다.

핵심 포인트

• swe-verified 벤치마크 기반 로컬 모델 성능 비교
• 양자화(Quantization) 설정에 따른 모델 성능 변화 분석
• 베이스 모델 및 파인튜닝 모델의 그룹별 성능 데이터 제공
• 데이터 시각화를 위한 Python 코드 활용