현실적인 MCP 오류 하의 도구 호출 LLM 에이전트: 규모가 결함 허용성을 보장하지 않는다

요약

LLM 에이전트가 외부 도구에 의존함에도 불구하고, 현재의 벤치마크는 현실적인 도구 오류를 테스트하지 못합니다. 본 연구는 프로토콜 인식 오류 주입 미들웨어인 MCP-Injector를 소개하여 실제 오류 환경을 시뮬레이션했습니다. 그 결과, 모델 규모가 결함 허용성을 보장하지 않으며, 프레임워크 수준의 오류 처리가 모델 크기보다 중요함을 입증했습니다.

핵심 포인트

• 현행 벤치마크는 현실적인 도구 오류에 대한 에이전트 복원력을 테스트하지 못함.
• MCP-Injector를 통해 프로토콜 레벨의 실제 오류 주입 및 분석을 수행함.
• 모델 규모(120B)가 크더라도 오류 발생 시 결함 허용성을 보장하지 못함.
• 에이전트 성능 향상을 위해 프레임워크 수준의 오류 처리가 핵심 요소임.