GraphPL: 패치워크 러닝을 위한 효율적이고 견고한 모달리티 임프루트먼트를 위한 GNN 활용

현재 분산 다중 모드 러닝 (distributed multi-modal learning) 연구는 일반적으로 클라이언트가 모든 모드에 걸쳐 완전한 정보에 접근할 수 있다고 가정하고 있습니다. 이는 실제 상황에서는 성립하지 않을 수 있습니다. 본 논문에서는 다양한 클라이언트에 이용 가능한 모달리티가 상이하며, 각 클라이언트의 누락된 모달리티를 비지도 학습 (unsupervised manner) 방식으로 임프루트먼트하는 패치워크 러닝 (patchwork learning) 을 탐구합니다. 기존 방법들은 관찰된 모달리티의 일부에만 의존하는 경향이 있어 모달리티 정보를 충분히 활용하지 못함이 입증되었습니다. 이 문제를 해결하기 위해 우리는 그래프 신경망 (GNN) 과 패치워크 러닝을 결합하여 모든 관찰된 모달리티를 유연하게 통합하고 노이즈가 있는 입력에도 견고함을 유지하는 GraphPL 을 제안합니다. 실험 결과는 GraphPL 이 벤치마크 데이터셋에서 SOTA 성능을 달성함을 보여줍니다. 실제 분산 전자 건강 기록 (electronic health record) 데이터셋에 대한 우리의 결과는 GraphPL 이 강력한 다운스트림 특징을 학습하며, 우수한 모달리티 임프루트먼트를 통해 질병 예측과 같은 작업을 가능하게 함을 보여줍니다.