PyramidDrop: 피라미드 시각적 중복성 감소를 통한 대규모 시각-언어 모델 (Large Vision-Language Models) 가속화

요약

PyramidDrop는 대규모 시각-언어 모델(LVLM)의 연산 효율성을 높이기 위해 피라미드 구조의 시각적 중복성을 제거하는 기술을 제안합니다. 이를 통해 모델의 성능을 유지하면서도 추론 속도를 가속화할 수 있습니다.

핵심 포인트

• 피라미드 구조를 활용한 시각적 중복성 감소 기법 제안
• 대규모 시각-언어 모델(LVLM)의 연산 가속화 달성
• 모델 성능 저하를 최소화하며 효율적인 시각 정보 처리