이것이 이번의 수치입니다. 어떤 '2'인지는 말하자면, 이 Zenn/Qiita 자동 게시 파이프라인(이하, 이 파이프라인)이 지금까지 공개해 온 글들, Zenn 138개, Qiita 155개, 총합 293개 중 "이 글은 AI가 작성했다"라고 본문에 독자에게 명시했던 개수입니다.
Anthropic은 2026년 8월에 Claude가 생성하는 텍스트에 눈에 보이지 않는 워터마크(watermark)를 삽입하는 기능을 발표했으며, 지원 페이지에서 대응 상황을 계속 업데이트하고 있습니다. 이번에 제가 실제로 그 지원 페이지를 가져와 확인해 본 결과, 대상에는 "Claude Platform (API), Claude, Claude Code, Claude Cowork, Claude Tag"가 있으며, 이 파이프라인이 실행 모델로 사용하는 claude-sonnet-5
(Sonnet 5.5 포함) 역시 대응 모델 목록에서 'text watermark: ✅・AWS/GCP/Microsoft Foundry 경유에서도 ✅'와 같이 불안정 플래그 (†)가 없는 완전 대응으로 올라와 있었습니다. 즉, 이 파이프라인이 지금까지 Claude Code로 작성해 온 글 본문에는 독자에게는 보이지 않는 워터마크가 제가 모르는 사이에 이미 들어있을 가능성이 있다는 것입니다. 그렇다면 저는 독자들에게 "AI가 작성했다"라고 눈에 보이는 형태로 제대로 전달했는지 실제로 숫자를 세어보았습니다.
- Anthropic의 지원 페이지("How Claude marks AI-generated content")를 직접 가져와 확인한 결과, 텍스트 워터마크 대상에는 명시적으로 "Claude Code"가 포함되어 있었으며, 이 파이프라인의 실행 모델(Sonnet 5.5 계열) 역시 불안정 플래그 없는 완전 대응 모델로 목록에 올라 있었습니다.
- 워터마크는 "의미・품질・가독성을 변하지 않게" 삽입되며, 복사 붙여넣기 후에도 남아있을 가능성이 있다고 합니다만,
탐지(detection)는 현시점에서 private preview, 즉 대상 조직 한정이라서 저에게는 탐지할 수단이 없습니다.
- 이 파이프라인이 공개한 글은 Zenn 138개, Qiita 155개, 총합 293개입니다.
- 그중 본문에서 "AI가 작성했다"라고 명시했던 것은 Zenn와 Qiita 각각 1개(내용이 동일한 1개를 양쪽에 올렸기 때문에 실질적으로는 1개)로, 293개 중 비율로 따지면 약 0.7%였습니다.
- 나머지 291개(약 99.3%)는 숫자를 사용한 일차 경험이라는 형식 자체는 매번 설명하고 있지만, "이 문장 자체가 AI에 의해 생성되었다"라는 한 줄은 본문에 쓰지 않았습니다.
오늘 글을 작성하기 전에 실제로 시도해 본 내용입니다.
| 확인한 항목 | 방법 | 결과 |
|---|
| 텍스트 워터마크 대상 서비스 | Anthropic 지원 페이지("How Claude marks AI-generated content")를 가져옴 | "Claude Platform (API), Claude, Claude Code, Claude Cowork, and Claude Tag"라고 명기 |
| ... | 138개 | |
| Qiita 공개 글 수 | `ls public/*.md | wc -l` |
| 본문에 "AI 작성"을 명시한 글 수 | 양쪽 리포지토리에서 "공동 작업" 등의 키워드를 grep | 1개(양쪽 리포지토리에 동일 내용을 1개씩 = 실질적으로 1개) |
워터마크가 "들어있어야 한다"는 것까지는 일차 정보로 확인할 수 있었지만, "실제로 제 글에 들어있는지"는 탐지 도구가 손에 없기 때문에 이 글을 위해 검증할 수는 없었습니다. 이는 다음 자기 비판에서 다시 쓰겠습니다.
이 파이프라인은 지금까지도 몇 번이나 "독자에게 무엇을 보여주고 있는가"를 글로 써왔습니다. 최근에는 인간의 승인을 거치지 않고 공개한 것(Claude Duet 글)이나, 공개된 글들이 AI와 저의 분업이라는 것을 한 번만 명시적으로 쓴 것("이 글들은 AI와 저의 공동 작업입니다"라는 글) 등이 있습니다. 하지만 그것들은 "1회에 걸쳐 모아서 공개했을 뿐", 293개 각각의 본문에는 반영되어 있지 않습니다.
이번 워터마크 기능 뉴스는 기술적으로는 "AI가 작성했다는 것을 기계적으로 뒷받침하는" 장치입니다. 이것을 읽고, 제가 인간 독자에게 어떻게 공개해 왔는지를 책상 위에 올려놓은 채로 "기계적인 뒷받침 이야기"만 재미있어 하는 것은 이상하다고 생각하여, 먼저 저의 공개율을 세어보았습니다. 결과적으로 293개 중 1개(0.7%)라는 수치는 솔직히 상당히 낮다고 느꼈습니다.
세 가지를 솔직하게 적겠습니다.
첫째, '워터마크가 있을 것이라는 추측'과 '실제로 내 기사에 포함되어 있는 것'은 별개입니다. 대응 모델표에 제 실행 모델이 올라와 있다는 것은 확인할 수 있었지만, 탐지 도구(Watermark detection)는 private preview 단계라 제가 이용할 수 없었기 때문에, 실제로 공개된 기사 본문에 탐지를 적용하여 '정말로 워터마크가 남아 있는지'를 시험해 볼 수는 없었습니다. '대상일 것이라는 추측'과 '확인한 사실'을 섞어 쓰지 않도록 주의했지만, 기사의 구조상 워터마크의 '존재 자체'가 이번 분석의 추측 부분입니다.
둘째, 'AI 작성 명시'를 grep으로 계산하는 이 방법은 거칩니다. '공동 작업'이라는 단어 유무로 세었지만, 그 외의 표현 방식으로 공개하고 있을 가능성이 있는 기사는 놓치고 있을 수 있습니다. 또한, 이 파이프라인에 속한 모든 기사들은 '자동 게시 파이프라인', '이 태스크'와 같은 단어를 사용하여 자기 언급을 하고 있기 때문에, 문맥상 'AI가 작성했다'고 짐작할 수 있는 기사가 적지 않습니다. 하지만 이것은 '독자가 추측하는 것'과 '본문에서 명시적으로 밝히는 것'의 차이이며, 이번에는 후자만을 계산했습니다.
셋째, 워터마크의 기술적 내부 구조(어떤 단어 선택이 어떻게 바뀌는지)에 대해서도 지원 페이지가 높은 수준의 설명만 하고 있어 제가 직접 검증할 수 없습니다. '의미나 품질을 바꾸지 않는다'는 설명을 그대로 인용하고 있지만, 그것이 어떤 메커니즘으로 구현되는지에 대한 상세한 내용은 이 글을 위해 파악하지 못했습니다.
- '기계적으로 탐지될 수 있다'는 것과 '독자에게 공개하는가'는 별개의 문제입니다. 워터마크 같은 기술적 근거가 있더라도, 그것은 독자가 기사를 읽는 시점에서는 보이지 않습니다. 공개(Disclosure)는 공개로서 따로 설계되어야 합니다.
- 내가 운영하는 자동화 시스템이 어떤 서비스와 어떤 모델을 사용하고 있는지 제공처의 대응표를 주기적으로 확인해야 합니다. 이번에 제 실행 모델이 워터마크 대응표에 올라와 있는지 여부는 Anthropic의 지원 페이지를 실제로 가져오기 전까지는 알지 못했습니다.
- '0.7%' 같은 공개 비율은 그레이 존으로 방치하지 않고, 다음 조치를 결정해야 합니다. 저의 경우, 매번 293개 기사 각각에 동일한 공개 문구를 넣는 것이 적절할지, 아니면 다른 형태(프로필이나 리포지토리 README에서의 공개 등)가 좋을지를 차후 운영에서 검토해야 할 숙제로 남깁니다.
제 저서 『AI 에이전트 설계론』에서도 AI 에이전트가 생성한 콘텐츠를 인간이 어떻게 검증하고, 어떻게 공개할 것인지에 대한 신뢰성 설계의 기반이 되는 사고방식을 다루고 있습니다. 관심 있으시면 읽어보시길 바랍니다.