모달 키네틱 타이포그래피(Modal Kinetic Typography)

우리는 벡터 글리프를 애니메이션화하여 의미론적 개념을 표현하는 동시에 가독성을 유지하는 모달 키네틱 타이포그래피를 소개합니다. 우리의 핵심 아이디어는 글리프의 자연 진동 모드에서 움직임을 구축하는 것입니다. 구체적으로, 벡터 윤곽선으로부터 조립된 유한 요소 고유 문제(finite-element eigenproblem)는 전체 문자 및 각 부분에 대한 글리프의 가장 부드러운 모드(softest modes)를 산출하여, 해당 부분이 휘어지게 합니다. 이 문제의 영 에너지 해(zero-energy solutions), 즉 강체 변환과 회전은 닫힌 형태로 각 부분에 적용되어, 부분들이 블록처럼 움직일 수 있게 합니다. 글리프를 애니메이션화하기 위해, 동결된 비디오 확산 모델(frozen video diffusion model)은 모드들의 진폭과 위상만을 감독합니다. 우리의 모달 접근 방식은 이전 작업의 두 가지 약점을 해결합니다. 비디오 스코어 증류(SDS) 하의 자유 형태 포인트 최적화는 각 점과 프레임을 노이즈 기울기(noisy gradients)를 따라 독립적으로 움직여 윤곽선을 찢고 지터(jitter)를 유발합니다. 이와 대조적으로, 우리의 모드는 윤곽을 따라 부드럽고 몇 개의 전체 주기 고조파에 의해 구동되어, 이러한 기울기를 부드럽고 끊김 없이 루프되는 움직임으로 제한합니다. 한편, 구조화된 대안들은 범주별 사전 지식(category-specific priors)으로부터 골격이나 키포인트에 의존하는 반면, 우리의 모드는 글리프 자체에서 나옵니다. 유일한 사전 지식은 언어 모델이 전체 알파벳을 위해 한 번 생성한 각 문자의 움직이는 부분 이름을 나열한 목록뿐입니다. 모달 키네틱 타이포그래피에서는 형태와 움직임이 구조적으로 분리됩니다: 단일 기본 윤곽선이 개념 쪽으로 조각되고, 모달 구동은 이를 변경할 수 없으므로, 글자가 재형성되지 않고도 애니메이션화될 수 있습니다. 우리의 방법은 동적 타이포그래피(Dynamic Typography)나 AniClipart보다 유사하거나 더 나은 개념 정렬에서 더 표현력이 풍부하고 부드러운 움직임을 생성하며, Dynamic Typography보다 글리프 찢김이 적고, 움직임만으로 개념을 전달해야 하는 동결된 형태 설정에서도 인간 평가자들에게 선호됩니다. 또한 우리의 결과는 Astra (GPT-6)에 의해서도 인간 평가자들에게 선호되었습니다.