Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
이 글은 아이폰 화면을 Mac에 연결하여 녹화하고 분석하는 방법을 설명합니다. ScrawlKit과 Scrawl 도구를 사용하면 말하기, 그리기, 클릭 등의 모든 상호작용이 프레임으로 캡처됩니다. 이를 통해 에이전트는 시간 또는 음성 구절 기반의 상세한 키프레임을 요청하며 심층적인 분석을 수행할 수 있습니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 Lobste.rs AI의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기아이폰 화면이 Mac의 창에 나타나고, 녹화하는 동안 그 위에서 말하고 그림을 그릴 수 있습니다.
⌥``⇧``S를 누르고, 말하고, 클릭하고, 그리고 그리세요. 그 결과를 에이전트(agent)에 붙여넣으세요.
아이폰 화면이 Mac의 창에 나타나고, 녹화하는 동안 그 위에서 말하고 그림을 그릴 수 있습니다.
ScrawlKit을 iOS 앱에 추가하여 휴대폰 자체에서 녹화할 수 있으며, 모든 탭과 스와이프가 프레임 위에 그려집니다.
Scrawl은 사용자가 그리거나, 클릭하거나, "look" 또는 "now"라고 말하거나, 화면이 변경될 때 프레임을 캡처합니다.
사용자의 음성은 컴퓨터에서 전사(transcribed)되며, 각 문장은 해당 내용의 프레임과 연결됩니다.
전체 화면을 녹화하면, 각 프레임은 사용자가 그리고 클릭한 창으로 잘립니다.
에이전트는 시간 또는 사용자가 말한 구절을 기준으로 특정 순간 주변의 밀집된 프레임 그리드(dense grid of frames)를 요청할 수 있습니다.
$ brew install --cask kitlangton/tap/scrawl
$ curl -LO https://scrawl.kitlangton.com/releases/Scrawl-latest-arm64.zip$
$ unzip Scrawl-latest-arm64.zip -d ~/Applications$
$ open ~/Applications/Scrawl.app
$ bunx skills add kitlangton/scrawl
이 스킬을 사용하면, Scrawl 붙여넣기(paste)를 받는 에이전트가 컨택 시트(contact sheet)와 전사본(transcript)을 읽고, 내레이션이 가리키는 키프레임(keyframes)을 열어, scrawl 명령어를 사용하여 더 자세히 살펴봅니다.