속보 | Vercel의 agent-desktop

요약

Vercel이 AI가 화면 스크린샷 없이 컴퓨터 앱을 조작할 수 있는 agent-desktop 도구를 출시했습니다. 이 도구는 화면 읽기 기능처럼 '구성 요소 목록'을 JSON 형태로 전달하여, AI가 버튼이나 입력란을 지정해 클릭하거나 데이터를 입력하게 합니다. Mac, Windows, Linux를 지원하며 사용자가 원하는 AI 모델을 직접 선택할 수 있습니다.

핵심 포인트

• 스크린샷 대신 JSON 기반의 '구성 요소 목록'으로 화면 정보를 전달합니다.
• Mac, Windows, Linux 등 다양한 OS 환경에서 작동하는 데스크톱 앱입니다.
• 내부 AI가 없어 사용자가 원하는 AI 모델을 직접 선택하여 사용할 수 있습니다.
• 사용 시 Mac에서는 반드시 '접근성(Accessibility)' 권한이 필요합니다.