절감액 숫자는 다섯 가지 항목 중 첫 번째
이번 달 가장 많이 공유된 SaaS 이야기는 알아둘 가치가 있습니다. 왜냐하면 영수증이 있는 희귀한 사례이기 때문입니다. swyx와 Latent Space 팀은 매년 43,000달러를 지불하는 실제 도구(행사용 스피커 관리 플랫폼)를 가져와 주말 동안 팀들에게 AI 에이전트로 이를 대체하도록 요청하는 공개 해커톤을 진행했습니다. 총 72개의 제출물이 나왔고, 약 1,000억 토큰이 사용되었습니다. 실제 인간 심사위원과 평가(evals), 그리고 10,000달러의 상금이 걸렸습니다.
헤드라인은 스스로 작성되었습니다: SaaS는 끝났다, 에이전트가 모든 것을 먹어치운다. 하지만 소규모 비즈니스에게 더 유용한 신호는 이 실험을 통해 드러난 조용한 부분입니다. 어려운 점은 대체품을 구축하는 것이 아니었습니다. 구축 이후에 발생하는 모든 것입니다.
이는 오너가 구독을 취소하고 에이전트가 그 공백(gap)을 가리킬 때 일어나는 상황과 정확히 일치합니다. 취소는 실제 돈이며, 전 세계에서 계산하기 가장 쉬운 숫자입니다. 또한 아무도 계산하지 않는 유일한 숫자이기도 합니다. 나머지 장부 항목은 기록되지 않은 시간으로 지불됩니다.
다섯 줄짜리 대체 장부
무언가를 취소하기 전에 이것을 실행해 보세요. 다섯 가지 항목, 실제 숫자로 된 것입니다.
1행: 더 이상 비용을 지불하지 않는 구독료
헤드라인입니다. 실제적이고 즉각적이며 가치가 있습니다. 해커톤의 이벤트 도구에 대해서는 연간 43K달러였고, 일반적인 소규모 비즈니스에서는 중급 수준의 도구 월 200~800달러인 경우가 더 많습니다. 이것을 적어보세요. 그리고 계속해서 적으세요. 다음 네 항목은 시간으로 지불되며, 계산하지 않은 시간은 절약하지 못한 시간입니다.
2행: 스스로 가입한 유지 보수 비용(maintenance retainer)
라이선스 도구는 그것을 유지하는 것이 전업인 사람들에 의해 관리됩니다. 여러분이 생성한 대체품은 여러분에 의해 유지됩니다. 에이전트가 사용하는 모델은 매월 변경됩니다. 여러분의 평가(evals)가 변화를 감지하거나, 직원들이 감지합니다. 예전에 무료로 받았던 모든 기능 업데이트는 이제 스스로 해야 할 과제로 나타납니다. 이 항목을 공급업체가 책정하듯이 가격을 매기세요: 최소한 한 달에 몇 시간, 영원히 — 명확한 소유자가 있어야 합니다. '누가 알아차리는 사람'은 소유자가 아닙니다.
3행: 사양 및 컨텍스트 유지보수(spec and context upkeep)
에이전트는 워크플로우가 문서화된 만큼만 잘 실행됩니다. 이는 곧 한 페이지짜리 사양서(spec) 자체가 제품의 일부라는 의미입니다. 현실이 페이지와 어긋나는 첫 주—새로운 가격 규칙, 새로운 고객 예외 사항 등—만 되면 그 사양서는 구식이 됩니다. 그리고 구식인 사양서는 사양이 없는 것보다 더 나쁩니다. 왜냐하면 그것은 자신감 있게 실패하기 때문입니다. 이전에는 설정 화면이 여러분의 프로세스를 무료로 문서화해주었습니다. 이제 그 부분까지도 여러분이 소유하게 된 것입니다. 모든 변경 전에 의도를 확인하고, 사양서를 최신 상태로 유지하며, 코드에 스스로 설명하도록 절대 의존하지 마십시오.
4번째 라인: 예외 케이스(edge-case) 비용
라이선스를 구매하는 모든 도구는 여러분의 특이한 경우들—일회성 환불 경로, 독특한 계약을 가진 고객, 갑자기 필요해진 3월 보고서 형식 회계 처리 등—을 조용히 흡수합니다. 판매자가 처리해주었기 때문에 여러분은 그것을 알아차리지 못했습니다. 대체 도구를 사용한 후에는 이 모든 것이 스스로에게 제출하는 지원 티켓이 됩니다. 약정하기 전에 그 라인(비용)을 가격 책정하십시오. 대체 도구를 구독 서비스와 병렬로 2~4주 동안 실행하고, 발견되는 모든 격차를 기록한 다음, 그 격차가 감수할 만한지 아니면 자격 미달인지 결정하십시오. 이 격차들을 취소 후에 발견하는 것은 지난 몇 년 동안 그 도구가 실제로 무엇을 하고 있었는지 배우는 가장 비싼 방법입니다.
5번째 라인: 새벽 2시에 누가 응대하는가
라이선스된 도구가 고장 날 때, 여러분은 티켓을 열고 다른 사람의 온콜(on-call) 로테이션 담당자가 처리합니다. 하지만 여러분의 에이전트가 가장 바쁜 주 전날 밤에 고장 난다면, 여러분 자신이 지원 계약인 셈입니다. 일부 비즈니스는 그 위험을 흡수할 수 있지만, 그렇지 않은 경우 그것은 신경질적인 실패가 아닙니다. 이는 5번째 라인이 여러분이 구매했던 것 중 일부는 SLA(Service Level Agreement)였음을 알려주는 것이며, 이것은 계속해서 구매할 가치가 있는 합법적인 부분입니다.
장부가 플러스(+)를 기록할 때
대체 도구는 작업이 지루하고, 잘 명세화되어 있으며, 양이 많을 때 승리합니다. 같은 작업을 반복적으로 수행하며, 한 페이지에 담기고 매일 사용되는 경우—유지보수 라인은 작게 유지되고 1번째 라인이 지배적입니다. 송장 생성, 리드 수집, 견적 조립, 보고서 작성: 이것이 바로 성공 영역입니다. 만약 해커톤에서 주말 안에 그것을 만들 수 있다면, 지루한 버전의 작업은 에이전트가 가장 잘 유지하는 종류의 작업입니다.
조용히 실패하는 경우
미리 알아차리면 모두 극복 가능한 세 가지 조용한 실패 패턴:
- 낮은 사용량(Low volume). 매월 200달러짜리 도구를 주간 단위로 사용하면 사용당 약 25달러가 발생합니다. 월별 유지보수 시간 2시간만 해도 이 금액에 미치지 못합니다. 수학이 성립하려면 충분한 사용량이 유지보수 비용을 상쇄해야 합니다.
- 규정 준수 부담(Compliance weight). 실제로 구매하는 것이 감사 추적(audit trail), 서류 제출, 인증서와 같은 경우 — 공급업체의 제품은 워크플로우 자체가 아니라 관련 서류 작업입니다. 에이전트는 워크플로우를 복제할 뿐, 이러한 규정 준수 부담을 물려받지 않습니다.
- 예외 케이스가 많은 업무(Edge-case-heavy work). 모든 작업에 클라이언트별 예외 사항이 포함되어 있다면, 명세서(spec)는 절대 수렴하지 않으며, 스스로에게 시간당 비용으로 영구적인 부업을 고용하는 셈입니다.
20분간의 점검
다음 갱신 주기에 구독 취소를 하고 싶은 충동이 들기 전에:
- 구독 목록을 가져옵니다. 에이전트가 대체할 수 있다고 가장 확신하는 항목을 고릅니다.
- 실제 숫자를 사용하여 다섯 가지 항목을 작성합니다 — 절약되는 구독료; 월별 시간 × 실제 비용; 명세서 유지보수 비용; 병행 테스트(parallel-run)를 위한 발견 기간 1개월; 밤에 발생하는 문제 발생 시 누가 책임을 질지에 대한 솔직한 문장.
- 이 항목들을 더합니다. 이 합계가 바로 정직한 장부입니다.
- 여전히 양수라면, 취소하기 전에 병행 테스트를 실행하세요 — 절대로 먼저 취소하고 4번 항목을 실제로 발견해서는 안 됩니다.
하지 말아야 할 것들
- 데모만 보고 취소하지 마세요. 주말 동안 만든 클론은 역량을 증명할 뿐, 경제성을 증명하는 것은 아닙니다. 구축(build) 자체가 비싼 부분은 아니었습니다.
- 구축을 프로젝트로 다루지 마세요. 구축은 주말의 일입니다. 제품은 유지보수, 명세서, 그리고 호출기(pager)입니다.
- 시간당 비용이 0이라고 가정하지 마세요. 이 장부가 거짓말하는 가장 흔한 방법은 소유주가 시간 계산을 할 때 금액을 $0으로 입력하는 것입니다. 그렇지 않습니다.
지켜야 할 한 가지 항목
구독 취소는 절약액의 첫 번째 항목일 뿐, 전부가 아닙니다. 대체 비용에 따라 모든 다섯 가지 항목을 산정했던 비즈니스가 승리했습니다 — 그리고 장부가 어디로 말하든 기꺼이 계속 비용을 지불했습니다.
어떤 에이전트가 자리를 지킬 수 있도록 만드는 전체 프레임워크(permission ladder, 기본적인 첫 임무, 그리고 교체 유지보수 비용을 저렴하게 유지하는 원페이지 사양 형식)를 원한다면, The AI Agent Owner's Playbook에 모두 작성되어 있습니다. 49 CAD, 즉시 다운로드.