음성으로 대화할 수 있는 AI 가상 동반자 (AI virtual companion)를 만들고 싶지만, 대부분의 도구는 설정이 복잡하고 인터넷 연결이 필요하며 개인정보 데이터를 신뢰하기 어렵습니다.

최근 Open-LLM-VTuber 프로젝트를 발견했는데, 이 프로젝트를 사용하면 Live2D 아바타를 가진 AI 음성 동반자를 로컬 머신에서 완전히 오프라인으로 실행할 수 있습니다.

단순한 대화뿐만 아니라, 카메라를 통해 우리를 관찰할 수 있고, 음성 중단 (voice interruptions), 터치 상호작용을 지원하며, 심지어 AI의 내면의 생각까지 표시할 수 있습니다.

GitHub:
http://github.com/Open-LLM-VTuber

화면에 떠 있는 데스크톱 펫 (desktop pet) 모드를 제공하여, 어느 위치로든 드래그할 수 있고, 클릭을 위한 마우스 패스스루 (mouse passthrough)를 허용하며, 일반적인 작업에 방해를 주지 않습니다.

또한 음성의 경우, 중국어로 대화하지만 AI는 일본어로 말하게 하는 것과 같은 TTS 번역을 지원합니다.

외형, 성격, 목소리는 모두 사용자 정의 (customizable)가 가능합니다. 자신만의 Live2D 모델을 가져올 수 있으며 음성 복제 (voice cloning)도 가능합니다.

백엔드는 Ollama, OpenAI, Gemini와 같은 주요 대규모 모델 (large models)과 호환되며, 음성 인식 및 합성 (speech recognition and synthesis) 방식에 대해 십여 가지 이상의 옵션을 제공합니다.

Windows, macOS, Linux 시스템을 지원합니다. 당신과 대화하고, 당신을 바라보며, 외형도 멋진 로컬 AI 동반자를 원한다면 이 프로젝트는 시도해 볼 가치가 있습니다.