Computer Use (lite)는 오픈 소스로, 브라우저가 아닌 전체 Mac을 어떤 AI로든 구동 가능: Claude, ChatGPT
요약
오픈 소스 프로젝트인 Computer Use (lite)는 Rust로 작성된 네이티브 MCP 서버를 통해 브라우저에 국한되지 않고 전체 Mac 환경에서 다양한 AI 모델(Claude, ChatGPT 등)을 구동할 수 있게 합니다. 이 시스템은 접근성 트리를 읽어 클릭 및 타이핑을 수행하며, API 키 없이도 여러 AI 앱에 직접 연결하여 자동화된 에이전트 기능을 제공합니다.
핵심 포인트
- 오픈 소스 프로젝트로 Mac 전체를 제어하는 네이티브 서버 구현.
- Rust 기반 MCP 서버가 접근성 트리를 활용해 화면 상호작용 수행.
- API 키 없이도 Claude, Gemini 등 다양한 AI 모델을 통합 지원.
- 실제 환경 벤치마크 결과를 통해 시스템의 성능 입증.
Computer Use (lite)는 오픈 소스이며, 브라우저뿐만 아니라 전체 Mac을 어떤 AI로든 구동할 수 있게 합니다. Claude, ChatGPT, Gemini, OpenRouter 또는 로컬 모델이 가능합니다. MCP를 통해 API 키가 필요 없으며, 이미 로그인된 AI 앱이 사고 과정을 처리합니다.
https://github.com/ajokhai/computer-use-lite
…
작동 방식: Rust로 작성된 작은 네이티브 MCP 서버가 화면과 각 앱의 접근성 트리(accessibility tree)를 읽은 다음, 클릭하고 타이핑을 합니다. Claude Code, Antigravity, Cursor 및 VS Code는 이 서버에 직접 연결됩니다. 대화할 수 있는 메뉴 바 에이전트도 있습니다.
시도가 실패했을 때 단순히 [내용 생략]
저는 실제 Mac과 실제 앱에서 벤치마크를 수행했으며, 스크립트를 통해 또는 라이브 프로필로 확인했습니다. 모델 자체의 말로는 절대 확인하지 않았습니다.
Chrome으로부터의 트윗 (모델 이름을 언급하고 리포 링크가 포함된 트윗 게시):
• Claude Opus 5.5 via MCP, API 키 없음: 통과, 53초
• Antigravity에서 Gemini 3.8 Flash
모든 놀라운 점은 수정 사항이나 교훈이 되었습니다. v0.1.11부터 v0.1.15까지 오늘 배포된 내용:
• 에이전트를 어디서든 중지하려면 Escape 키를 3번 누르세요.
• 마우스나 키보드를 만지는 것을 감지하고, 행동하기 전에 다시 화면을 확인합니다.
• 정리(Cleanup) 기능이 확인되었습니다: 무언가를 삭제하면
직접 사용해보고, 자신만의 모델과 Mac으로 벤치마크 해보세요. scripts/bench.py가 작업을 실행하고 check_desk.py가 이를 점수화하며, 정리 과정도 포함됩니다. 결과를 이슈나 풀 리퀘스트로 보내주세요.
도움 요청: Windows 및 Linux 포트(각각 오픈된 풀 리퀘스트에 가이드가 있음), 더 어려운 [내용 생략]
단지 Computer Use (제 GitHub의 오픈 소스 프로젝트, 확인해 보세요)를 벤치마크했을 뿐이며, 이것이 결과입니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 X Claude/Anthropic의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기