버추얼 유튜버 (Virtual Streamer)를 하거나 가상 캐릭터를 사용하여 라이브 방송을 하려면, 전문적인 모션 캡처 (Motion Capture) 장비는 수천만 원을 호가하고, 일반 웹캠 솔루션은 설정이 너무 복잡합니다.

우연히 SysMocap이라는 오픈 소스 (Open Source) 프로젝트를 발견했는데, 일반 웹캠만으로도 3D 가상 캐릭터를 실시간으로 구동할 수 있습니다.

비디오 화면을 통해 얼굴 표정과 신체 동작을 포착하여 3D 모델에 실시간으로 매핑 (Mapping)하며, 지연 시간 (Latency)이 매우 낮습니다.

GitHub: https://t.co/KdRy6ItJuO

또한 얼굴, 상반신, 전신 등 다양한 캡처 모드를 지원하며, 손 동작 인식도 가능합니다.

VRM 및 FBX 형식의 3D 모델 임포트 (Import)를 지원하여 골격 구조를 자동으로 인식하며, 골격과 의상을 조정할 수도 있습니다.

OBS 라이브 스트리밍 (Live Streaming) 연동을 지원하며, WebXR 인터페이스를 통해 모션 캡처 데이터를 AR/VR 장치로 전달할 수도 있습니다.

Windows 및 macOS 설치 패키지를 제공하여 바로 사용할 수 있습니다. 필요한 분들은 확인해 보세요.