Microsoft가 사용자의 작업 과정을 기록하여 AI 에이전트에게 학습시키는 앱을 오픈소스화했습니다. 4.3K stars.

요약

Microsoft가 사용자의 실제 작업 과정을 녹화하여 AI 에이전트에게 학습시키는 오픈소스 앱을 공개했습니다. 이 도구는 클릭, 명령어 등 모든 사용자 활동을 캡처하고, GitHub Copilot의 도움으로 이를 실행 가능한 자동화 스킬로 변환합니다. 단일 예시를 통해 일반화함으로써 다양한 양식 제출 등의 복잡한 프로세스 자동화를 가능하게 합니다.

핵심 포인트

• Microsoft가 작업 과정을 기록하여 AI 에이전트에게 학습시키는 앱을 오픈소스로 공개했습니다.
• 사용자의 클릭, 앱 전환, 터미널 명령어 등 모든 활동을 녹화하고 캡처합니다.
• GitHub Copilot이 녹화된 내용을 편집 가능한 자동화 스킬 목록으로 변환해줍니다.
• 하나의 예시 학습만으로 일반화되어 다양한 상황에 적용할 수 있습니다.