b11833: 어휘(vocab) : Nemotron-3.5-Embed 토큰화 수정 (#30974)
요약
본 기사는 Nemotron-3.5-Embed 모델의 어휘(vocab) 및 토큰화 과정에 대한 기술적 수정 사항을 다룹니다. 핵심은 `src/llama-vocab.h`와 `src/llama-vocab.cpp` 파일을 업데이트하고 이름 변경 작업을 통해 모델의 토큰화 정확성을 높이는 것입니다.
핵심 포인트
- Nemotron-3.5-Embed 모델의 어휘(vocab) 및 토큰화 수정 작업 진행
- `llama-vocab` 관련 핵심 파일들을 업데이트하여 안정성 확보
- 모델 구조 개선을 위한 이름 변경(rename) 사항 반영
AI 자동 생성 콘텐츠
본 콘텐츠는 llama.cpp Releases의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기0