Opus 5가 코드를 반복하는 테스트 작성에 중독된 문제점 (AI Engineer Paris 강연 요약)

Matt Pocock (TypeScript wizard, ex-Vercel):

"Opus 5는 코드 자체를 자신에게 되풀이하는 테스트를 쓰는 것에 중독되었다."

22분간의 강연에서 Matt은 AI가 생성한 Pull Request(PR)가 저장소(repo)를 어떻게 '슬롭 캐논(slop cannon)'으로 만들지 막는 방법을 설명합니다:

5:30 → 영원히 통과하고 아무것도 잡아내지 못하는 테스트 작성 방식
8:31 → 깊은 모듈(deep modules): 코드베이스 설계가 그러한 테스트를 불가능하게 만드는 방법
11:41 → 코딩 표준이 구현자(implementer)가 아닌 별도의 리뷰 에이전트에 속해야 하는 이유
15:34 → AI 리뷰어는 주석을 달아서는 안 됩니다. 수정 사항을 커밋해야 합니다.
17:20 → 일방향 대 양방향 문(one-way vs two-way doors): 인간이 실제로 검토할 필요가 있는 PR은 무엇인가
20:38 → 회고 기술(retro skill): 모든 리뷰 주석을 체크로 변환하여 두 번 다시 작성하지 않도록 하는 방법

당신이 일하는 것을 관찰하며 학습하는 에이전트를 구축하는 방법 - 고정된 글↓