Jev의 대안이 되는 오픈 웨이트 모델 OpenJudgement-4B 소개 (얼리 프리뷰)

저는 분류(classification), 점수 매기기(scoring), 그리고 참/거짓 판단(true/false judgments)을 위해 커스텀 데이터셋으로 파인튜닝된, 실험적인 Qwen 기반의 모델 OpenJudgement-4B-Preview를 공개합니다.
이 모델은 답변 옵션에 직접 점수를 매기고, Python을 사용하여 결과를 확률과 함께 JSON 형식으로 만듭니다. 여전히 LLM 백본(backbone)을 사용하지만, 응답 토큰을 하나씩 생성하지는 않습니다.
아직 미완성 단계이며 Jev의 수준에는 미치지 못했습니다. 피드백을 받고 싶습니다. 특히 이 모델이 틀리는 사례들을 예시로 주시면 감사하겠습니다.
API를 통해 사용하려면: https://kitani.ai/models/kitani/OpenJudgement-4B-Preview (유료)
모델 및 추론 코드: https://huggingface.co/kitaniai/OpenJudgement-4B-Preview
제출자 /u/bakatristan
[링크] [댓글]