소규모 문제 진술과 '벽 작업'을 활용한 GPT 기반 스프레드시트 모델링 실험

요약

본 논문은 GPT 기반 도구를 활용하여 재사용 가능한 분석용 스프레드시트 모델을 구축하는 방법을 탐구합니다. 연구진은 5가지 GPT 확장 기능을 평가한 후, Excel AI를 상세 테스트 대상으로 선정했습니다. 간단하고 구조화된 문제 진술에 따라 Excel AI의 성능을 ERFR 기준(셀 입력, 공식, 고정 숫자 없음, 레이블 포함, 정확성)으로 평가한 결과, 해당 도구가 잘 구조화된 모델은 생성할 수 있으나 일관성과 재현 가능성 측면에서 부족함을 확인했습니다.

핵심 포인트

• GPT 기반 도구는 분석용 스프레드시트 모델 구축에 활용될 잠재력을 가지고 있다.
• Excel AI를 테스트하기 위해 ERFR(셀 입력, 공식, 고정 숫자 없음, 레이블 포함, 정확성)이라는 엄격한 평가 기준을 사용했다.
• 테스트 결과, Excel AI는 구조화된 모델 생성 능력은 보이지만 일관성과 재현 가능성이 떨어진다.
• 스프레드시트 모델링의 자동화를 위해서는 높은 수준의 일관성과 신뢰성 확보가 필요하다.