
모든 DeepSeek 모델 원샷 테스트: 살펴보고 비교할 242개의 결과물!
요약
OpenRouter를 통해 제공되는 10개의 DeepSeek 모델들을 대상으로 35개의 프롬프트에 대한 원샷 테스트를 진행한 결과입니다. 모델별 성능 비교를 위해 총 242개의 결과물을 수집하여 분석했습니다.
핵심 포인트
- DeepSeek V4, V3, R1 등 다양한 모델 라인업 테스트
- 35개 프롬프트에 대한 10개 모델의 원샷 결과 비교
- 제공업체 오류 등으로 인해 총 242개의 유효 결과 도출
- 모델별 성능 차이를 확인할 수 있는 데이터셋 제공
저렴한 OpenRouter 모델들을 원샷(oneshotting) 테스트하던 주말 작업의 연장선으로, 동일한 35개의 프롬프트에 대한 10개의 DeepSeek 모델 전체 결과를 가져왔습니다. DeepSeek는 (더 많은 제공업체 오류 / 빈 완성문 등으로 인해) 다소 어려운 시간을 보냈으며, 따라서 10*35 매트릭스 중 오직 242개만이 결과로 도출되었습니다. 결과는 여기에서 확인하실 수 있습니다: https://oneshotlm.com/model/?q=deepseek
DeepSeek V4: deepseek-v4-pro, deepseek-v4-flash (+ 0731)
DeepSeek V3.x: deepseek-v3.2 (+ exp), deepseek-v3.1-terminus, deepseek-chat-v3.1, deepseek-chat
DeepSeek R1: deepseek-r1 (+ 0528)
submitted by /u/kms_dev [link] [comments]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/LocalLLaMA의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기