독해 문항 생성 시 특징 제약 기반 난이도 조절을 위한 멀티 에이전트 프레임워크

요약

기존의 단일 에이전트 방식이 가진 난이도 조절 제약 조건 미준수 문제를 해결하기 위해, 멀티 에이전트 프레임워크인 MAFIG를 제안합니다. MAFIG는 여러 LLM 에이전트와 특징별 평가자가 협력하여 문항을 생성하고 반복 수정함으로써 목표 난이도에 부합하는 문항을 생성합니다. 실험을 통해 MAFIG가 기존 방식보다 높은 제약 조건 준수율과 강력한 난이도 조절 성능을 보임을 입증했습니다.

핵심 포인트

• 단일 에이전트 프롬프팅의 난이도 제약 조건 미준수 한계 극복
• LLM 에이전트와 특징별 평가자가 협력하는 MAFIG 프레임워크 도입
• 단조 증가하는 난이도를 구현하기 위한 특징 제약 세트 시퀀스 구축 방법 제안
• 기존 베이스라인 대비 높은 목표 제약 조건 준수율 및 난이도 조절 효능 확인