Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
arXivAI 번역논문
LVLM의 KV 캐시 경량화: LightKV 제안
본 논문은 대형 비전-언어 모델(LVLMs)의 추론 과정에서 발생하는 과도한 GPU 메모리 오버헤드를 해결하기 위해 LightKV라는 새로운 KV 캐시 경량화 기법을 제안합니다. LightKV는 텍스트 프롬프트에 의해 안내되는 교차 모달리티 메시지 전달 방식을 활용하여 비전 토큰 간의 중복성을 효과적으로 포착하고, 사전 채우기 단계에서 점진적으로 KV 캐시를 압축합니다. 실험 결과, LightKV는 원본 비전 토큰의 55%만으로도 KV 캐시 크기를 절반으로 줄이고 연산량을 최대 40% 감소시키면서도 기존 성능을 유지하는 뛰어난 효율성을 입증했습니다.
5월 4일14
arXivAI 번역논문
감각 주의 네트워크를 활용한 실제 임상 저선량 간 CT 의 무감독 노이즈 제거
본 논문은 저선량 컴퓨터 단층 촬영(low-dose CT)에서 발생하는 노이즈 제거 문제를 해결하기 위해 딥러닝 기반의 무감독(unsupervised) 프레임워크를 제안합니다. 이 프레임워크는 U-Net 구조, 주의 메커니즘, 잔여 네트워크 등을 결합하고 감각 손실을 도입하여 다중 스케일 특징 추출과 변환을 수행합니다. 특히 실제 임상 데이터의 감독 학습 한계를 극복하면서도 우수한 성능을 보여 영상 의사로부터 높은 평가를 받았습니다.
5월 4일4