이번 주 AI 코딩에 대한 대화의 흐름이 바뀌었습니다. 벤치마크 때문도, 데모 때문도 아닙니다. 세 명의 실무자가 자신들의 증거(receipts)를 보여주었기 때문입니다.

📖 차트와 임베디드 소스가 포함된 전체 버전을 AgentConn에서 읽어보세요 →

Simon Willison은 대부분 Claude Fable 5가 작성한 오픈 소스 릴리스를 배포하는 데 드는 정확한 비용을 공개했습니다: $149.25. 한 개발자는 23년 된 게임 엔진을 iPhone으로 19시간 이내에 포팅했습니다. 그리고 Stripe는 Fable 5를 사용하여 단 하루 만에 5,000만 줄 규모의 Ruby 마이그레이션을 수행한 것으로 알려졌습니다. 이는 해당 팀이 두 달 정도 걸릴 것으로 예상했던 작업량입니다.

이것들은 장난감 같은 데모나 벤치마크 점수가 아닙니다. 비용, 커밋 히스토리(commit histories), 그리고 배포 로그(deployment logs)가 포함된 실제 프로덕션 결과물입니다.

영수증 #1: $149.25의 송장

7월 5일, Simon Willison은 마치 항목별 청구서처럼 보이는 제목의 블로그 포스트를 게시했습니다: "sqlite-utils 4.0rc2, 대부분 Claude Fable이 작성함 (약 $149.25 소요)".

sqlite-utils는 SQLite 데이터베이스를 조작하기 위해 널리 사용되는 Python 라이브러리입니다. 4.0 릴리스 후보(release candidate) 버전은 마이그레이션(migrations), 중첩 트랜잭션(nested transactions), 그리고 파괴적 변경(breaking changes)을 포함하는 대대적인 리팩토링(refactor) 버전입니다. Willison은 정확한 토큰(token) 비용을 공개하고, 각 세션을 문서화했으며, Fable이 뛰어난 부분과 수정이 필요했던 부분을 기록했습니다. 최종 검토 과정에서 Fable은 릴리스 차단 요소(release blockers)로 분류될 수 있는 다섯 가지 중대한 문제를 식별해냈는데, 이는 Willison 본인이 직접 검토할 때는 발견하지 못했던 문제들이었습니다.

$149.25라는 수치는 총 API 지출액을 나타냅니다. 100만 토큰당 $10/$50를 기준으로 계산하면, 이는 중간 수준 개발자의 약 3시간 업무 비용과 비슷합니다.

증거 #2: 19시간의 포팅 (Port)

개발자 Ammaar Reshi는 X에 게시한 영상을 통해 Command & Conquer: Generals Zero Hour가 에뮬레이터가 아닌 iPhone에서 네이티브로 실행되는 모습을 보여주었습니다. ARM64용으로 컴파일된 실제 C++ 엔진이 터치 컨트롤 및 핀치 투 줌 (pinch-to-zoom) 기능과 함께 작동합니다.

이 프로젝트는 EA가 GPL v3 라이선스 하에 소스 코드를 공개했기에 가능했습니다. GeneralsX 커뮤니티는 macOS 포팅을 위해 수개월을 보냈습니다. Reshi는 iOS로의 도약을 위해 Claude Code를 통해 Fable 5를 사용했습니다. 엔진을 적응시키고, 터치 입력 핸들러 (touch input handlers)를 구축하며, MoltenVK를 연결하는 작업을 수행했습니다.

첫 번째 빌드는 40분이 걸렸습니다. 전체 프로젝트는 19시간 동안 19번의 커밋 (commit)으로 완료되었습니다. Opus 4.8은 가장 높은 노력 설정에서도 동일한 작업을 완료할 수 없었습니다.

증거 #3: 5,000만 줄의 마이그레이션 (Migration)

Anthropic은 Stripe로부터 받은 고객 신호를 공개했습니다. Fable 5는 Stripe의 5,000만 줄 규모 Ruby 코드베이스에 대해 코드베이스 전반의 마이그레이션을 단 하루 만에 수행했습니다. 수동으로 진행했다면 두 달 이상이 걸렸을 작업입니다.

⚠️ "하루 만에 5,000만 줄"이라는 프레임은 면밀한 검토가 필요합니다. Stripe 팀은 여전히 모든 변경 사항을 라이브 환경과 대조하여 검증해야 했습니다. 구현 시간 (implementation time)은 압축되었지만, 검토 시간 (review time)은 줄어들지 않았습니다. "구현 시간과 검토 시간의 비율이 역전됩니다." 이 점은 중요하지만, 이것이 "AI가 5,000만 줄의 코드를 작성했다"는 뜻은 아닙니다.

병목 현상의 변화

한 Fable 5 엔지니어는 다음과 같이 설명했습니다: "이제 모델이 아니라, 당신이 한계입니다."

현재 AI 코딩이 효과적인 분야:

• 명확한 구조를 가진 레거시 코드 변환 (Legacy code transformations)
• 대규모 코드베이스 전반에 걸친 패턴 기반 마이그레이션 (Pattern-based migrations)
• 지식 있는 운영자가 동반된 명확한 범위의 라이브러리 작업
• 도구 통합을 통한 역공학 (Reverse engineering)

아직은 효과적이지 않은 분야:

• 그린필드 아키텍처 결정 (Greenfield architecture decisions)
• 운영자가 결과물을 평가할 수 없는 모든 경우
• 새로운 알고리즘 설계 (Novel algorithm design)
• 커버리지 (Coverage)보다 정확성 (Correctness)이 더 중요한 시스템

이것이 코딩 에이전트 스택 (Coding Agent Stacks)에 의미하는 바

백만 토큰당 $10/$50의 비용을 기준으로 할 때, Fable 5를 집중적으로 사용하는 하루 비용은 $200–$400에 달합니다. 7월 7일 이후, Fable 5는 사용량 기반 크레딧 (usage-based credits) 방식으로 전환됩니다. 제한 없는 접근 권한을 중심으로 워크플로우를 구축했던 팀들은 처음으로 비용 통제 (cost discipline)에 직면하게 될 것입니다.

이번 주의 증거들은 상황을 바꾸지 않습니다. 오히려 상황을 더 명확하게 만듭니다. 모델은 진정으로 더 나아졌습니다. 하지만 여전히 운영자 (operator)의 역할이 더 중요합니다.

원문 게시처: AgentConn