Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
AI가 스마트폰 내부 작업(앱 조작, 화면 터치 등)을 직접 수행할 수 있게 되었습니다. Claude Code 같은 모델이 아이폰이나 안드로이드 기기를 원격으로 제어하는 방식입니다. 다만, 결제나 쇼핑처럼 취소 불가능한 행동도 가능하므로, 사용 시 반드시 AI의 움직임을 주의 깊게 관찰해야 합니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 X @so_ainsight (자동 발견)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기phone-harness, 정말 충격적입니다.
AI에게 부탁을 해도 은근히 손대기 어려웠던 것이 '스마트폰 내부 작업'이었습니다.
https://x.com/RoundtableSpace/status/2114646969217954001/video/1
...
Claude Code나 Codex는 똑똑한데, 앱을 열고 탭하거나 글자를 치는 것과 같은 화면 조작만은 직접 해야 했었거든요.
어떤 것이 가능한지. 게시자가 제시하는 예시는 다음과 같습니다.
어떤 사람이 Claude Code에게 “현재 위치에서 Delah Coffee까지 Waymo(차량 호출 서비스)를 불러줘”라고 부탁했다고 합니다. 그러자 Claude Code가 아이폰을 조작하여 실제로 해냈다고요.
본인의 기기에서 사용하려면 두 가지 방법이 있습니다.
・iPhone … Mac의 '아이폰 미러링' 화면을 통해 작동시킵니다 (macOS 15 이상, iOS 18 이상 필요)
・Android … adb라는 연결 방식을 통해 작동시킵니다 (Mac, Windows, Linux에서)
꼭 염두에 두어야 할 한 가지 사항이 있습니다.
게시자도 돈을 사용하는 조작을 맡기기 전에, 처음 몇 번은 AI의 움직임을 자신의 눈으로 지켜보는 것을 권장하고 있습니다.
실제 스마트폰을 직접 구동할 수 있게 된 이상, 쇼핑이나 결제처럼 취소하기 어려운 행동도 그대로 실행될 수 있다는 것이군요. 익숙해질 때까지는 지켜보면서 사용하는 것이 안심입니다.