완전히 로컬에서 구동되는 대화형 AI: Whisper + Hermes 8B + Kokoro, 클라우드 제로, 봉제 인형 안에 구현

요약

Whisper, Hermes 3 Llama 3.1 8B, Kokoro 등을 활용하여 클라우드 연결 없이 완전히 로컬 환경에서 구동되는 대화형 AI 봉제 인형을 구현했습니다. 이 시스템은 STT, LLM, TTS 기능을 모두 LAN 내에서 처리하며, 개인 메모리 및 비전 기술(얼굴/감정 인식)까지 통합하여 높은 몰입도를 제공합니다.

핵심 포인트

• Whisper, Hermes 3 Llama 3.1 8B 등 모든 AI 컴포넌트를 로컬로 구동
• 클라우드 API 키나 외부 연결 없이 완전한 오프라인 대화 구현 가능
• LangGraph를 이용해 개인별 메모리 및 과거 대화 기억 기능 구현
• dlib과 FER+를 활용하여 사용자 얼굴 식별 및 감정 인식 통합