GReFEM: 물리 기반 3D 메쉬 정제를 위한 제로샷 시맨틱 어시스턴트로서의 멀티모달 LLM

요약

본 연구는 MLLMs가 물리 기반 텍스트 프롬프트를 활용하여 유한 요소 메쉬 정제(FEM meshing)를 위한 제로샷 기하학적 프록시 역할을 할 수 있는지 탐구합니다. GReFEM 프레임워크는 MLLM을 사용하여 응력 임계 영역을 시각적으로 국소화하며, orthoViews 모듈을 도입하여 2D와 3D 기하학 간의 격차를 해소했습니다.

핵심 포인트

• MLLMs가 물리 기반 지침에 따라 메쉬 정제 영역을 제로샷으로 국소화 가능함을 입증함.
• GReFEM 프레임워크는 MLLM을 활용하여 응력 임계 영역을 시각적으로 식별하는 새로운 접근법을 제시함.
• orthoViews 모듈은 2D MLLM과 3D 기하학 간의 연결 고리를 강화하는 역할을 수행함.