생성형 튜토리얼: 물리적 작업을 위한 실시간 상황별 시각 지침을 향하여

물리적 작업을 위한 시각 지침은 일반적으로 한 환경에서 작성되어 다른 환경에서 따라야 하므로, 사용자가 시연된 도구, 재료 및 공간적 관계를 자신의 환경으로 번역해야 하는 필요성이 있습니다. 본 논문에서는 사용자의 환경과 작업 흐름 내에서 의도된 결과와 행동을 묘사하는 실시간 시각 지침의 개념적 프레임워크인 Generative Tutorial을 소개합니다. 최신 이미지 및 비디오 생성에 대한 형성 평가를 통해 15가지 물리적 작업을 걸쳐 실패 사례와 잠재적 이점을 파악했습니다. 이러한 발견들을 바탕으로, 우리는 관찰된 작업 공간 컨텍스트와 선행 행동의 예측된 시각적 결과를 사용하여 목표 이미지를 능동적으로 생성하고 시연 비디오를 생성하는 증강 현실(augmented-reality) 프로토타입 시스템을 구축했습니다. 24명의 참가자가 참여한 실험실 연구 결과, 이 시스템이 기존에 작성된 지침보다 더 높은 작업 수행 품질, 더 큰 인식된 작업 공간 일치성, 그리고 더 짧은 단계 확인 간격을 보였습니다. 정성적 분석 결과는 상황적 유사성이 신뢰를 어떻게 형성하는지, 생성 오류가 해석에 어떤 영향을 미치는지, 그리고 지침 전달이 사용자의 필요에 맞춰 어떻게 조정되어야 하는지를 강조했으며, 이는 향후 설계에 정보를 제공했습니다.