REST API를 위한 멀티 에이전트 기반 LLM 변형 테스트 (Multi-Agent LLM-based Metamorphic Testing)

요약

REST API의 테스트 오라클 문제를 해결하기 위해 LLM 기반 멀티 에이전트 워크플로우를 활용하는 ARMeta를 제안합니다. OpenAPI 문서를 바탕으로 변형 테스트 시나리오를 식별하고 실행 가능한 테스트로 자동 구현하여 시스템의 정확성을 검증합니다.

핵심 포인트

• LLM 멀티 에이전트를 활용한 REST API 변형 테스트 도구 ARMeta 제안
• 테스트 오라클 문제 해결을 위한 명세 기반 테스트 접근 방식 채택
• Given-When-Then 형식의 테스트 시나리오 자동 생성 및 구현
• 기존 시나리오 기반 테스트 대비 보완적인 테스트 동작 탐색 확인