문서 파서(Document Parsers)는 어떻게 고장 나는가? 문서 지능(Document Intelligence)의 구조적 취약성 감사

요약

본 논문은 RAG 및 문서 질의응답 시스템의 기반이 되는 문서 레이아웃 분석(DLA) 파이프라인의 구조적 취약성을 평가하기 위한 새로운 감사 프레임워크를 제안합니다. 기존의 영역 중심적 평가 방식에서 벗어나, 블록 수준 구조 손실률(B-SLR)과 구조 인식 진단을 통해 섭동이 레이아웃 구조와 상호작용하며 실패를 전파하는 방식을 정밀하게 분석합니다.

핵심 포인트

• 기존 DLA 강건성 평가의 영역 중심적(Area-centric) 편향 문제를 식별하고 이를 해결하기 위한 경량 감사 프레임워크 제안
• 블록 수준 구조 손실률(B-SLR)이 OCR 불안정성보다 레이아웃 구조적 실패를 훨씬 더 정확하게 예측함(R^2=0.727/0.916)
• 입도 인식 노출 기술자를 통해 폐쇄(Occlusion) 및 위상(Topology) 지배적 경로를 세분화하여 분석 가능
• 구조적으로 타겟팅된 작은 탐침(Probe)이 대규모 섭동과 유사한 수준의 QA 및 검색 성능 저하를 유발할 수 있음을 증명