만약 비디오 모델이 프롬프트뿐만 아니라 카메라 움직임, 연속적인 동작, 그리고 진행되는 과정에서 발생하는 이벤트에도 반응할 수 있다면 어떨까요?

Astronex-World 1.0은 텍스트나 초기 이미지를 통해 미래의 시각적 상태를 예측하면서도 상호작용 제어를 유지하도록 설계된 공개적이고 제어 가능한 월드 모델 기반입니다.

이 모델의 양방향(bidirectional) 및 인과적(causal) 모델은 지속적인 생성을 지원하며, 특히 인과적 버전은 단일 NVIDIA L20 GPU에서 24 fps로 832×480 비디오를 생성하고 실시간 스트리밍합니다. 예약된 액션 및 출력 인터페이스는 또한 체화 지능(embodied intelligence) 및 자율 주행 분야의 향후 사후 학습을 위한 기반을 제공합니다. WBench에서 Astronex-World 1.0은 Navi에서 73.5점, Full에서 70.0점을 기록했습니다.

Title: Astronex-World 1.0: Real-Time Interactive World Model Foundation
Project URL: https://t.co/LMQK5T7hYg
Paper: https://t.co/zNnDIIw4cT