기하학적 구조에서 기능 분석까지: 도시 파사드(Urban Facades)의 의미론적 및 기능적 구문 분석을 위한 다중 작업 LiDAR 벤치마크

건물 파사드를 이해하는 것은 도시 디지털 트윈(digital twins), 문화유산 모델링, 지속 가능한 도시 분석에 매우 중요하지만, 기존의 LiDAR 벤치마크는 기하학적 구조와 의미론적 분할(semantic segmentation) 단계에서 멈춰 있으며 각 건축 요소의 기능적 역할에 대한 추론을 지원하는 부분이 거의 없습니다. 우리는 HFX3D라는 대규모 도시 파사드 벤치마크를 소개합니다. 이 데이터셋은 캐나다 Halifax의 26개 건물에서 네 계절, 주야간, 그리고 다양한 날씨 조건에서 포착된 약 4억 9,200만 개의 LiDAR 포인트로 구성되어 있습니다. 각 파사드는 의미론적(semantic), 인스턴스(instance), 및 개별 인스턴스 기능 속성이라는 세 가지 계층으로 주석 처리되었으며, 이는 기하학적 구조와 의미론적 정보를 기능적 레이블과 결합한 최초의 파사드 데이터셋인 것으로 알고 있습니다. 이 주석은 기하학 기반 휴리스틱(geometry-guided heuristics)을 전문가 검증과 결합한 반자동 파이프라인을 통해 생성되었습니다. 우리는 대표적인 포인트 기반, 그래프 기반, 컨볼루션(convolutional), 트랜스포머(transformer) 아키텍처를 벤치마크했으며, 의미론적 분할만으로도 심각한 클래스 불균형 하에서 이미 어려운 작업이며, 반복되는 구조의 인스턴스 분리와 기하학으로부터 기능적 추론을 수행하는 것은 훨씬 더 어렵다는 것을 발견했습니다. 이 벤치마크는 기능 인식(function-aware) 3D 도시 이해를 위한 새로운 기반을 마련합니다.
프로젝트 페이지: https://jijup.github.io/hfx3d-benchmark/
코드: https://github.com/jijup/hfx3d-benchmark/