RunningTab: 환경 측 탭을 이용한 직접 워크스페이스 상호작용

원문 발행 2026. 10. 08. 02:16원문 언어 영어AI 한국어 번역arXiv cs.CL 원문 보기

요약

본 글은 LLM 에이전트가 워크스페이스 파일과 상호작용하는 과정에서 발생하는 정보 누락 문제를 해결하기 위한 RunningTab 프레임워크를 소개합니다. 이 프레임워크는 환경 측 탭을 추가하여, 작업의 요구사항, 읽힌 파일 출처(provenance), 미개봉 후보군 등을 에이전트와 함께 기록하고 추적할 수 있게 합니다.

핵심 포인트

RunningTab은 직접 워크스페이스 상호작용(DWI)에 환경 측 탭을 추가하여 정보 누락 문제를 해결합니다.
환경은 작업 요구사항, 읽힌 파일 출처, 미개봉 후보군 등을 체계적으로 기록하고 추적합니다.
벤치마크 결과, RunningTab은 단순 DWI 및 기존 베이스라인보다 일관되게 우수한 성능을 보였습니다.

많은 지식 노동은 이미 워크스페이스가 보유하고 있는 파일들로부터 새로운 결과물을 만들어내며, LLM 에이전트들이 이러한 작업을 수행하기 시작하고 있습니다. 직접적인 코퍼스(corpus) 상호작용을 통해, 에이전트는 인덱싱 없이 터미널에서 해당 파일들을 검색하고 읽을 수 있으며, 이 방식으로 여러 파일들로부터 결과물을 산출하는 것을 저희는 직접 워크스페이스 상호작용(Direct Workspace Interaction, DWI)이라고 부릅니다. 하지만 파일을 찾는 것만으로는 절반의 작업에 불과합니다. 어떤 작업이 무엇을 요구하는지, 무엇이 읽혔는지, 그리고 목록에는 올라왔지만 열리지 않은 것이 무엇인지 아무것도 추적하지 못하며, 이 모든 것이 컨텍스트 윈도우(context window)를 통해 흔적 없이 사라질 수 있습니다. 따라서 에이전트가 그림을 추출했음에도 불구하고 그것을 포함하지 않은 보고서를 제출할 수도 있습니다. 이를 해결하기 위해, 우리는 RunningTab이라는 프레임워크를 제시합니다. 이 프레임워크는 직접 워크스페이스 상호작용에 환경 측 탭(environment-side tab)을 장착하여, 작업이 여전히 무엇을 필요로 하는지에 대한 기록을 환경이 에이전트와 함께 유지하도록 합니다. 구체적으로, 에이전트는 자신의 요구사항을 추가하고, 환경은 읽힌 모든 파일을 출처(provenance)가 포함된 발췌문으로 기록하며, 목록에 올라왔지만 열리지 않은 파일들을 후보군(candidate)으로 기록합니다. 그러면 에이전트는 각 요구사항 옆에서 가장 잘 맞는 발췌문들과 상위 미개봉 후보군을 볼 수 있고, 이를 일치하는 내용과 해결하거나 이유와 함께 보류할 수 있으며, 만약 여전히 해결되지 않은 요구사항을 가지고 완료를 시도하면, 종료 확인(finish check)을 통해 그 요구사항들을 받게 됩니다. 우리는 세 가지 벤치마크에서 세 가지 LLM으로 RunningTab을 검증했으며, 이 과정에서 RunningTab은 단순 DWI와 모델 내에 기록을 유지하는 베이스라인들보다 일관되게 우수한 성능을 보였으며, 해당 탭은 일반적으로 결과물에 필요한 값들을 보여주었습니다.

AI 자동 생성 콘텐츠

원문 바로가기

RunningTab: 환경 측 탭을 이용한 직접 워크스페이스 상호작용

요약

핵심 포인트

댓글