AI 에이전트에게 iOS 시뮬레이터 및 Android 기기 화면을 관찰하고 조작할 수 있는 능력 제공

요약

AI 에이전트가 iOS 시뮬레이터와 Android 기기의 화면을 관찰하고 직접 조작할 수 있는 커맨드 라인 도구가 공개되었습니다. 접근성 트리를 압축된 토큰 형태로 요약하여 효율성을 높였으며, 모바일 자동화 및 에이전트 개발 검증에 최적화되어 있습니다.

핵심 포인트

• iOS 시뮬레이터 및 Android 기기 화면 조작 가능
• 접근성 트리 기반의 토큰 압축 기술로 효율성 극대화
• 클릭, 타이핑, 슬라이드 등 다양한 인터랙션 지원
• 모바일 에이전트 개발 및 자동화 테스트에 적합