Parlor v2: M3 Pro에서 실행되는 최선의 노력으로 구현된 완전 로컬 GPT-Live 클론
요약
M3 Pro 칩에서 실행 가능한 로컬 GPT-Live 클론인 Parlor v2를 소개합니다. 전이중(Full-duplex) 모델 구현 시도와 실패를 거쳐, 현재는 캐스케이드(Cascade) 시스템 방식을 채택하여 구현되었습니다.
핵심 포인트
- M3 Pro 환경에서 동작하는 완전 로컬 GPT-Live 클론 구현
- Gemma 4 12B를 활용한 전이중 모델 미세 조정 시도 및 한계 분석
- 현재는 캐스케이드(Cascade) 시스템 방식을 통해 성능 최적화
- 오픈소스 프로젝트로 GitHub을 통해 공개됨
GPT-Live는 너무 훌륭해서 저는 거의 매일 사용합니다. 출시된 이후로 이를 복제하고 싶었습니다.
저의 첫 번째 시도는 Gemma 4 12B를 전이중 (Full-duplex) 모델처럼 동작하도록 미세 조정 (Fine-tuning)하는 것이었습니다. 모델에 결정 틱 (Decision tick) + 음성 헤드 (Speech head)를 이식하는 것과 같은 방식이었죠. 여러 번의 시도 끝에 실패했습니다. 현재로서는 고전적인 캐스케이드 (Cascade) 시스템이 여전히 더 낫다고 생각합니다. 우리는 그저 자비로운 프런티어 AI 기업이 GPT-Live와 대등한 수준의 전이중 (Full-duplex) 모델을 출시할 때까지 기다려야 합니다.
Repo: https://github.com/fikrikarim/parlor/
submitted by /u/ffinzy
[link] [comments]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/LocalLLaMA의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기