Pixal3D: 단일 이미지로부터 고충실도 3D 에셋 생성 (TencentARC, 로컬 실행 가능 모델)

https://huggingface.co/TencentARC/Pixal3D

"Pixal3D는 단일 이미지로부터 고충실도 (high-fidelity) 3D 에셋을 생성합니다. 어텐션 (attention)을 통해 이미지 특징을 느슨하게 주입하던 이전 방식들과 달리, Pixal3D는 역투영 (back-projection)을 통해 픽셀 특징을 3D로 명시적으로 들어 올림으로써(lifts) 직접적인 픽셀-3D 대응 관계를 구축합니다. 이를 통해 상세한 기하학적 구조 (geometry)와 PBR 텍스처를 갖춘, 재구성 (reconstruction) 수준에 근접한 충실도를 구현할 수 있습니다."

이 서브레딧(sub)에서 아무도 언급하지 않은 것 같아, 모두에게 알림을 드립니다.

몇 가지 빠른 요점:

• 로컬에서 실행 가능한 모델입니다.

• 저는 Philip J. Fry처럼 Claude에게 "Fix it!"이라고 계속 소리치며 RTX 5090에서 작동시키는 데 성공했습니다. (참고로 이 방법은 대부분의 모델에 통하며, 만약 Claude를 사용 중이고 Comfy 팀이 처리해주기 전에 로컬 모델을 시도해보고 싶다면 추천합니다.)

• 제 눈에는 Trellis.2 raw보다 한 단계 진보한 것처럼 보이지만, 제 말만 믿지는 마세요. 온라인 데모가 있으니 직접 시도해 보세요.

Claude에게 소리치는 과정에서 상당한 시간을 들여 창의적인 시도를 해야 했으며, 제가 직접 판단을 내리고 어떻게 진행할지에 대한 조언을 주어야 했다는 점을 참고해 주세요. 하지만 끈기가 저에게는 보상을 주었고, 더 널리 보급된 가이드가 나올 때까지는 노력을 기울이는 누구에게나 보상이 따를 것이라고 생각합니다.