요약

이커머스 운영 환경에서 LLM 에이전트의 장기적 일관성을 평가하기 위한 새로운 벤치마크인 MerchantBench를 소개합니다. 에이전트가 복잡한 이커머스 태스크를 수행할 때 유지해야 하는 일관성을 측정하는 데 중점을 둡니다.

핵심 포인트

• 이커머스 특화 LLM 에이전트 벤치마크 제안
• 장기적 작업 수행 시 에이전트의 일관성 평가
• 복잡한 이커머스 운영 시나리오 반영