Harness x 모델 조합: 더 많은 데이터!
요약
사용자가 로컬 환경에서 다양한 모델과 harness 조합을 테스트하고 결과를 공유할 수 있는 웹사이트 airbench.ai가 공개되었습니다. 이 플랫폼은 데이터 기반으로 모델별 최적의 harness를 파악하는 데 도움을 주며, 사용자 참여를 독려하기 위해 기여자 섹션도 추가했습니다.
핵심 포인트
- airbench.ai는 다양한 모델-harness 조합 테스트 및 결과 공유 웹사이트입니다.
- 사용자들은 3090과 같은 일반 GPU로 높은 성능의 기준치를 달성할 수 있습니다.
- 플랫폼은 데이터 기반으로 모델별 최적의 harness를 식별하는 데 도움을 줍니다.
- 기여자 섹션 추가로 커뮤니티 참여와 결과 공유가 활성화되었습니다.
저는 로컬 환경에서 harness와 모델의 조합을 테스트하고 있지만, 더 중요한 것은 누구나 자신의 설정을 테스트하고 최고의 결과를 공유할 수 있는 웹사이트를 만들었다는 것입니다. airbench.ai입니다. 그리고 성공했습니다! 저는 모르는 사람에게 감사드리지만, 3090으로 제 기준치를 모두 뛰어넘었습니다! (저는 5090을 사용합니다). 지금까지의 우승 설정은 다음과 같습니다: qwen3.8-flash-next-iq3_s를 pi와 Strata로 사용하여, 3090 24GB, 시스템 RAM 80GB, 컨텍스트를 256으로 늘렸습니다. 더 자세한 내용은 여기에서 확인하세요: https://airbench.ai/checkup/c58559df-40b2-40e4-b5f3-7a51c2c9336f/report 데이터를 수집한 덕분에 모델별로 어떤 harness가 가장 좋은지 알 수 있습니다. 이미지를 보세요. 다른 이야기로는, 웹사이트를 더 좋게 만들고 더 많은 사람들이 참여하도록 장려하기 위해 방금 '기여자(contributor)' 섹션을 추가했습니다. 자유롭게 살펴보세요. 그리고 네, 기여하려면 로그인해야 합니다. 하지만 아니요, 그럴 필요는 없습니다. 여전히 모든 사람의 결과를 볼 수 있습니다. https://preview.redd.it/vrhb9lj4f8uh1.png?width=2351&format=png&auto=webp&s=8097e28fc12d0546400f630e511c858becbb2d1c /u/dh7net이 제출했습니다. [링크] [댓글]
AI 자동 생성 콘텐츠
본 콘텐츠는 Reddit AI Engineering의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기