PlantRig - 뼈에서 가지로: 식물 골격 재구성을 위한 자기회귀 리깅 (Autoregressive Rigging) 모델의 적응
요약
자기회귀 리깅 모델을 식물 골격 재구성에 적용하기 위한 연구입니다. 기존 모델의 분지 구조 인식 한계를 분석하고, 합성 데이터셋을 활용한 미세 조정을 통해 다양한 식물 형태와 잎 구조에 대응하는 일반화 성능을 확보했습니다.
핵심 포인트
- 자기회귀 리깅 모델의 식물 구조 일반화 능력 평가
- UniRig과 SkinTokens의 식물 위상 보존 성능 비교 분석
- 토큰화 파이프라인의 기하학적 병목 현상 규명
- 다회차 미세 조정을 통한 식물 분지 위상 및 잎 구조 복원
- 캐릭터 리깅 모델과 식물 구조 간의 도메인 격차 해소
UniRig 및 SkinTokens와 같은 자기회귀 리깅 (Autoregressive rigging) 모델은 관절이 있는 캐릭터에는 뛰어난 성능을 보이지만, 식물 구조로의 일반화 능력은 여전히 거의 탐구되지 않은 상태입니다. 이는 식물의 위상 (Topology)이 학습된 골격 사전 지식 (Skeletal priors)에 도전하는 매우 가변적이고 비정형적인 분지 (Branching) 패턴을 나타내기 때문입니다. 우리는 합성 L-시스템 (L-system)으로 생성된 나무와 단축형 (Monopodial), 합축형 (Sympodial), 윤생형 (Whorled), 덩굴형 (Vine-like) 원형을 아우르는 실제 스캔 데이터를 사용하여 식물 골격 재구성을 위한 이 모델들을 평가합니다. 예비 테스트 결과, UniRig은 복잡한 분지를 거의 선형적인 체인으로 붕괴시키는 반면, SkinTokens는 위상을 더 잘 보존하지만 가지를 과도하게 분할 (Over-segmented)하고 불안정한 출력 공간을 생성하는 것을 확인하였으며, 이에 따라 우리는 더 높은 안정성을 가진 UniRig에 집중했습니다. 진단 결과, 이러한 붕괴는 샘플링 단계에서의 분지 토큰 (Branch tokens) 억제 때문임을 밝혀냈으며, 추가 분석을 통해 동결된 메쉬 인코더 (Frozen mesh encoder)가 구조적 변이에 대한 민감도가 제한적임을 확인했습니다. 이는 순수하게 학습된 편향 (Learned bias)이라기보다 토큰화 파이프라인 (Tokenization pipeline)의 기하학적 병목 현상 (Geometric bottleneck)임을 시사합니다. 이러한 발견을 바탕으로, 우리는 여러 절차적으로 생성된 합성 데이터셋에 대해 다회차 미세 조정 (Multi-round fine-tuning)을 적용했습니다. 여러 회차에 걸쳐 모델은 점진적으로 정확한 분지 위상을 회복하였으며, 잎의 두께가 없고 메쉬 법선 (Mesh-normal)에 의존하는 기하학적 특성 때문에 더 어려운 사례인 잎이 있는 식물로까지 일반화 범위를 넓혔습니다. 결과적으로 생성된 모델은 잎에 특화된 구조적 변경 없이도 다양한 식물 형태에 대해 잘 일반화되었으며, 이는 타겟팅된 미세 조정이 캐릭터 리깅 사전 지식과 식물 골격 구조 사이의 도메인 격차 (Domain gap)를 실질적으로 좁힐 수 있음을 나타냅니다. 따라서 본 연구는 분지 위상과 잎 유형 모두를 아우르는 자동화된 식물 리깅을 위한 실행 가능한 경로를 제시하며, 이는 우리의 연구 결과에 포함되지 않은 유형의 식물에도 적용될 수 있습니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.GR (Graphics)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기