대규모 언어 모델(LLM)을 위한 에이전트 환경 엔지니어링: 환경 모델링, 합성, 평가 및 응용에 관한 조사

환경은 다양한 시나리오에서 대규모 언어 모델 (LLM) 기반 에이전트를 위한 상호작용 시스템 역할을 하며, 모델 능력의 지속적인 진화를 이끄는 데 중요한 역할을 합니다. 이러한 중요성에도 불구하고, 기존 연구에는 체계적인 분류와 심층적인 분석이 부족합니다. 본 논문은 환경 엔지니어링 라이프사이클(lifecycle)의 관점에서 에이전트 환경에 대한 현재 연구를 모델링, 합성, 평가 및 응용을 아우르며 체계적으로 연구합니다. 구체적으로, 본 논문은 먼저 8가지 속성과 8가지 도메인의 관점에서 대표적인 환경들을 소개하고, 이들의 발전 경로에 대한 상세한 분석을 제공하며 핵심 능력을 강조합니다. 둘째, 자동화된 환경 합성(environment synthesis)을 위해 심볼릭 합성(symbolic synthesis) 및 뉴럴 합성(neural synthesis)과 같은 두 가지 패러다임을 소개합니다. 또한 본 논문은 각 패러다임에서의 다양한 환경 평가 방법을 보여줍니다. 셋째, 에이전트-환경 공동 진화(agent-environment co-evolution)의 관점에서 상응하는 환경 응용 사례를 논의합니다. 구체적으로, 본 논문은 네 가지 상호 보완적인 관점, 즉 메모리 중심 경험 진화(memory-centric experience evolution), 오케스트레이션 중심 워크플로우 진화(orchestration-centric workflow evolution), 궤적 중심 오프라인 진화(trajectory-centric offline evolution), 그리고 탐색 중심 온라인 진화(exploration-centric online evolution)를 통해 동적 환경에서의 에이전트 진화를 위한 주요 경로를 규정합니다. 그리고 환경 진화의 세 가지 패러다임, 즉 뉴럴 주도형(neural-driven), 난이도 주도형(difficulty-driven), 그리고 스케일링 주도형(scaling-driven) 접근 방식을 식별합니다. 마지막으로, Environment-as-a-Service, 멀티 에이전트 환경(Multi-agent Environments), 그리고 뉴럴-심볼릭 환경(Neural-Symbolic Environments)을 포함하여 몇 가지 유망한 미래 방향을 논의합니다.