AI 에이전트를 활용한 “소프트웨어 팩토리 (software factories)”의 약속은 매혹적입니다. 작업을 대기열에 넣고, 에이전트가 구현하게 하며, 리뷰와 테스트를 자동화하고, 그 과정에서 사람을 배제하는 것입니다.

Advanced Context Engineering for Coding Agents 리포지토리의 에세이인 Why Software Factories Fail는 중요한 반론을 제기합니다. 루프(loops)의 횟수와 생성되는 코드의 양을 늘리는 것만으로는 시간이 흐름에 따라 건강한 시스템을 유지해야 하는 문제를 그 자체로 해결할 수 없다는 것입니다.

속도는 지속 가능한 품질과 동일하지 않다

에이전트는 구현 시간을 며칠에서 몇 시간으로 단축합니다. 하지만 리뷰, 제품 검증 및 아키텍처적 영향에 대한 이해는 여전히 시간을 필요로 합니다.
조직이 이 단계를 제거하려고 시도하고 테스트, 린터 (linters), 리뷰 에이전트 및 모니터링에만 의존할 때 위험이 나타납니다. 이러한 메커니즘은 필요하지만 모든 것을 포착하지는 못합니다.
테스트는 몇 초 만에 특정 흐름이 통과되었음을 알려줄 수 있습니다. 반면 잘못된 아키텍처 결정의 비용은 몇 주 또는 몇 달 후에 나타날 수 있습니다. 과도한 결합 (coupling), 중복, 모호한 경계, 그리고 단순한 변경 사항이 시스템의 멀리 떨어진 부분을 망가뜨리기 시작하는 현상 등이 그것입니다.

핵심 문제: 유지보수성을 위한 빠른 오라클 (oracle)은 없다

모델은 검증 가능한 정답이 있는 작업에서 훈련되고 평가될 수 있습니다. 코드의 경우, 이는 “컴파일된다”, “테스트를 통과한다” 또는 “이슈 (issue)가 해결되었다”와 같은 기준에 유리합니다.
하지만 시스템이 이러한 모든 기준을 충족하면서도 진화하기가 점점 더 어려워질 수 있습니다. 유지보수성 (maintainability)은 즉각적인 신호나 단순한 지표가 아닙니다. 그것은 새로운 변경 사항이 도입되고 팀이 소프트웨어를 이해, 수정 및 운영해야 할 때 드러납니다.
따라서 기술적 판단을 보존하지 않고 생성을 자동화하는 것은 비용을 미래로 전가하고, 장애 발생 및 재작성 (rewrites)의 비용을 크게 높일 수 있습니다.

불을 꺼버리는 대신 무엇을 해야 하는가

대안은 코드 에이전트 (code agents)를 포기하는 것이 아닙니다. 구현 속도를 높이기 전에 의사결정의 품질을 높일 수 있는 프로세스 내에서 에이전트를 사용하는 것입니다.

• 큰 작업을 시작하기 전에 제품 (product)과 아키텍처 (architecture)를 정렬할 것.
• 컴포넌트 간의 책임 범위를 명확하게 정의할 것.
• 작고 검증 가능한 수직적 조각 (vertical slices) 단위로 계획할 것.
• 시스템에 대한 이해를 외주 주지 말고, 조사, 구현, 테스트 및 리뷰를 위해 에이전트를 사용할 것.
• 비즈니스 컨텍스트 (business context), 아키텍처, 그리고 장기적인 결과가 요구되는 지점에 인간의 리뷰를 집중할 것.

계획은 재작업 (rework)을 방지할 때 관료주의가 아닙니다. 코드 작성 전의 양질의 제품 및 기술 논의는 나중에 생성되고 리뷰되는 수십 개의 PR (Pull Requests)보다 더 많은 시간을 절약할 수 있습니다.

엔지니어의 역할은 변하는 것이지, 사라지는 것이 아니다

에이전트와 함께라면 병목 현상은 코드를 타이핑하는 것이 더 이상 아닙니다. 대신 올바른 문제를 선택하고, 적절한 컨텍스트 (context)를 제공하며, 범위를 제한하고, 결과를 평가하며, 결정들 사이의 일관성을 유지하는 것이 병목이 됩니다. 관련 지표는 단순히 "큐(queue)에 얼마나 많은 작업이 들어왔는가?"가 되어서는 안 됩니다. 다음과 같아야 합니다: 시스템이 변경하기 더 쉬워지고 있는가, 아니면 더 어려워지고 있는가? 이 질문은 특히 기존 코드베이스에서 매우 중요한데, 거버넌스 (governance) 없는 속도는 단기적인 이득을 갚기 어려운 기술 부채 (technical debt)로 바꿀 수 있기 때문입니다.

출처: https://github.com/humanlayer/advanced-context-engineering-for-coding-agents/blob/main/wsff.md