MM-StanceDet: 검색 강화 다중 모달 다중 에이전트 태도 감지

요약

MM-StanceDet는 텍스트와 이미지가 상충되는 신호를 포함하는 복잡한 공론장 상황에서 태도 감지(MSD)의 어려움을 해결하기 위해 제안된 새로운 프레임워크입니다. 이 방법은 검색 강화(Retrieval Augmentation), 전문화된 다중 모달 분석 에이전트, 추론 기반 토론 단계, 그리고 자기 성찰을 통합한 다중 에이전트 아키텍처를 특징으로 합니다. 실험 결과에 따르면 MM-StanceDet는 기존의 한계를 극복하고 복잡한 태도 감지 문제에서 최신 성능을 달성했습니다.

핵심 포인트

• MM-StanceDet는 검색 강화(Retrieval Augmentation)를 통해 문맥 기반 정렬 문제를 해결합니다.
• 전문화된 다중 모달 분석 에이전트와 추론 강화 토론 단계를 통합하여 해석의 깊이를 높였습니다.
• 자기 성찰(Self-Reflection) 메커니즘을 도입하여 최종 판단(adjudication)의 견고성을 확보했습니다.
• 다섯 개의 데이터셋에 걸친 실험에서 기존 SOTA 기준선을 크게 능가하는 성능을 입증했습니다.