AI 에이전트가 이제 휴대폰을 터치하고, 영화를 촬영하며, 3D 모델을 그릴 수 있게 되었습니다.

요약

최근 GitHub에 공개된 무료 프로젝트들을 통해 AI 에이전트가 휴대폰 제어(Pinky, Poki), 영상 제작(cinecode), 3D 모델링(sand3d) 등 광범위한 실생활 및 창작 작업을 수행할 수 있게 되었습니다. 이 기술들은 개발자들이 Claude Code와 Codex를 활용하여 에이전트의 기능을 확장하는 데 도움을 주는 새로운 기술 데모들입니다.

핵심 포인트

• Pinky/Poki: AI 에이전트가 MCP 프로토콜로 실제 휴대폰(iPhone/Android)을 제어할 수 있음을 시연했습니다.
• cinecode: 시나리오 작성부터 프레임 구성까지 코드로 완성된 MP4 영상 파일을 생성합니다.
• sand3d: 짧은 Python 코드만으로 3D 객체를 출력하며, 복잡한 기능을 구현하는 것이 가능함을 보여줍니다.
• vork: 에이전트가 장면과 자체 shader를 작성하고 GPU에서 직접 렌더링하는 연구 프리뷰입니다.