AgentTrustCI: Java LLM 에이전트를 위한 빌드 시간 정책, 접지(Grounding), 및 궤적 테스트

요약

AgentTrustCI는 Java/JUnit 5 프레임워크를 활용하여 LLM 에이전트의 애플리케이션 계층 기대치를 검증하는 도구입니다. 이 시스템은 정책(policy), 답변 접지(grounding), 필수 워크플로우 준수 여부 등을 트레이스 기반으로 테스트합니다. 결정론적 리플레이 기능을 통해 반복 가능한 빌드 시간 테스트를 지원하며, 행동 계약을 표현할 수 있는 실용적인 패턴을 제시합니다.

핵심 포인트

• Java/JUnit 5 기반으로 LLM 에이전트의 기대치를 검증하는 프레임워크입니다.
• 정책(policy), 접지(grounding), 궤적(trajectory) 테스트를 통해 에이전트 행동을 검사합니다.
• 결정론적 리플레이 구현으로 반복 가능한 빌드 시간 테스트가 가능합니다.
• 실제 케이스에서 주입된 결함 및 제어 흐름을 정확하게 분류했습니다.