LLM 기반 만화 번역기 공개: Rust와 llama.cpp로 구현
요약
본 프로젝트는 이미지 전체를 번역할 수 있는 고성능 만화 번역기를 소개합니다. 객체 탐지(object detection), 시각적 대규모 언어 모델 기반 OCR (Visual LLM-based OCR), 레이아웃 분석, 그리고 미세 조정된 인페인팅 모델을 결합한 파이프라인을 사용합니다. 특히, llama.cpp를 통합하여 Gemma 4 및 Qwen3.5 계열 등 다양한 LLM을 지원하며, OpenAPI 호환 API를 제공해 LM Studio나 OpenRouter 같은 외부 도구에서도 활용 가능합니다. 사용자 친화적인 인터페이스와 미
핵심 포인트
- 이 번역기는 객체 탐지, Visual LLM 기반 OCR, 레이아웃 분석 등 복합 기술을 사용해 높은 성능을 자랑합니다.
- llama.cpp를 통합하여 Gemma 4 및 Qwen3.5 계열 모델을 지원하며, 다양한 커스터마이징 옵션을 제공합니다.
- OpenAPI 호환 API를 통해 LM Studio나 OpenRouter 같은 외부 플랫폼에서도 쉽게 연동할 수 있습니다.
- 단순 번역을 넘어 글꼴, 크기, 색상 변경 등 편집 기능까지 갖춘 '미니 포토샵 에디터' 기능을 제공합니다.
🎨 LLM 기반 만화 번역 파이프라인 공개
최근 개발된 이 프로젝트는 단순한 번역을 넘어, 모든 이미지를 처리할 수 있는 고성능 만화 번역기입니다. 객체 탐지(object detection), 시각적 대규모 언어 모델 기반 OCR (Visual LLM-based OCR), 레이아웃 분석 등 여러 첨단 기술을 결합하여 최적의 성능과 사용 편의성을 확보했습니다.
주요 기능 및 기술 스택:
- LLM 통합: llama.cpp를 활용하여 Gemma 4와 Qwen3.5 계열 모델을 지원합니다. 또한, 검열되지 않은(uncensored) 또는 미세 조정된(fine-tuned) 모델도 사용할 수 있습니다.
- API 호환성: OpenAPI 규격에 맞춰 API가 제공되므로, LM Studio나 OpenRouter 같은 외부 도구와 쉽게 연동할 수 있습니다.
- 사용자 경험 (UX): 데모 영상에서 볼 수 있듯이, 버튼 클릭 한 번으로 전체 파이프라인이 실행됩니다. 결과물은 단순히 텍스트만 얻는 것이 아니라, 글꼴, 크기, 색상 등을 수정할 수 있는 '미니 포토샵 에디터'처럼 편집까지 가능합니다.
이 모든 기능은 완전한 오픈 소스로 공개되어 있어 누구나 접근하고 활용할 수 있습니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 r/LocalLLaMA의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기2