모바일 NPU를 활용한 완전 온디바이스 GUI 에이전트 구축
요약
기존 GUI 에이전트는 클라우드 의존성으로 지연 및 개인 정보 노출 문제를 겪습니다. 본 논문은 모바일 NPU의 특성을 활용하여 DroidPrefill이라는 새로운 추론 아키텍처를 제시합니다. 이는 프리필 중심 추론과 효율적인 컨텍스트 관리를 결합해 온디바이스 에이전트 성능을 혁신적으로 개선했습니다.
핵심 포인트
- 기존 GUI 에이전트는 클라우드 의존성으로 지연 및 개인 정보 노출 문제가 발생합니다.
- 모바일 NPU는 완전 온디바이스 LLM 추론에 매력적인 기반 환경을 제공합니다.
- DroidPrefill은 프리필 중심 추론과 효율적 컨텍스트 관리를 결합한 아키텍처입니다.
- 실험 결과, DroidPrefill은 지연 시간을 최대 85.0%까지 줄이고 성공률을 24.6% 향상시켰습니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.AR의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기