본문으로 건너뛰기

© 2026 Molayo

arXiv논문2026. 05. 20. 10:56

독해 문항 생성 시 특징 제약 기반 난이도 조절을 위한 멀티 에이전트 프레임워크

요약

기존의 단일 에이전트 방식이 가진 난이도 조절 제약 조건 미준수 문제를 해결하기 위해, 멀티 에이전트 프레임워크인 MAFIG를 제안합니다. MAFIG는 여러 LLM 에이전트와 특징별 평가자가 협력하여 문항을 생성하고 반복 수정함으로써 목표 난이도에 부합하는 문항을 생성합니다. 실험을 통해 MAFIG가 기존 방식보다 높은 제약 조건 준수율과 강력한 난이도 조절 성능을 보임을 입증했습니다.

핵심 포인트

  • 단일 에이전트 프롬프팅의 난이도 제약 조건 미준수 한계 극복
  • LLM 에이전트와 특징별 평가자가 협력하는 MAFIG 프레임워크 도입
  • 단조 증가하는 난이도를 구현하기 위한 특징 제약 세트 시퀀스 구축 방법 제안
  • 기존 베이스라인 대비 높은 목표 제약 조건 준수율 및 난이도 조절 효능 확인

난이도 조절형 독해 문항 생성에 관한 최근 연구들은 난이도 관련 특징(feature)을 조정하여 문항을 생성하기 위해 거대 언어 모델 (LLMs)을 활용해 왔습니다. 그러나 기존 방식들은 일반적으로 단일 에이전트 프롬프팅 (single-agent prompting) 접근 방식에 의존하며, 이는 지정된 특징 제약 조건 (feature constraints)을 일관되게 충족하지 못하는 경우가 많아 목표 난이도 수준에서 벗어난 문항을 생성하는 결과를 초래합니다. 이러한 한계를 해결하기 위해, 우리는 여러 LLM 에이전트와 특징별 평가자 (feature-specific evaluators)가 협력하여 의도된 제약 조건에 따라 문항을 생성하고 반복적으로 수정하는 특징 제약 기반 문항 생성용 멀티 에이전트 프레임워크인 MAFIG를 소개합니다. 나아가, 난이도 조절에 있어 MAFIG의 효능을 검증하기 위해, 단조 증가하는 난이도를 가진 문항들을 생성할 수 있는 특징 제약 세트의 시퀀스를 구축하는 방법을 제안합니다. 실험 결과는 MAFIG가 베이스라인 (baselines)보다 훨씬 높은 비율로 목표 제약 조건을 준수하는 문항을 생성하며, 난이도 교정된 제약 시퀀스 (difficulty-calibrated constraint sequence)를 통해 강력한 난이도 조절을 달성함을 입증합니다.

AI 자동 생성 콘텐츠

본 콘텐츠는 arXiv cs.CL (NLP)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.

원문 바로가기
0

댓글

0