DySink: 자기회귀적 장기 비디오 생성을 위한 동적 프레임 싱크 (Dynamic Frame Sinks)
요약
DySink는 자기회귀적 장기 비디오 생성 시 발생하는 '싱크 붕괴(sink collapse)' 현상을 해결하기 위해 제안된 검색 기반 프레임워크입니다. 기존의 고정된 초기 프레임 싱크 방식 대신, 시각적으로 관련성이 높은 과거 프레임을 동적으로 선택하여 메모리 효율성과 시간적 품질을 동시에 향상시킵니다.
핵심 포인트
- 고정된 초기 프레임 싱크 방식이 초래하는 정보의 노후화 및 싱크 붕괴 문제 해결
- 시각적 관련성에 기반하여 과거 프레임을 동적으로 선택하는 적응형 검색 메커니즘 도입
- 싱크 이상 게이트(sink anomaly gate)를 통해 과도한 헤드 간 합의를 감지하고 억제
- 분 단위 길이의 비디오 생성에서 기존 베이스라인 대비 높은 시간적 품질과 동적 정도 달성
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.AI의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기