우리는 Bersyn을 만듭니다. Bersyn은 누군가 특정 카테고리에 대한 추천을 요청할 때 AI 모델이 어떤 제품을 언급하는지 추적하는 도구입니다. 이번 주의 스캔 대상은 알림 인프라 (notification infrastructure)였습니다. 이는 앱이 모든 기능을 직접 구축하지 않고도 이메일, SMS, 푸시, 인앱 및 Slack 메시지를 보낼 필요가 있을 때 사용하는 API 계층입니다. 결과는 이 분야에서 무언가를 구축하고 있는 사람이라면 누구나 걱정해야 할 정도로 익숙한 것이었습니다.

우리가 테스트한 질문은 개발자가 실제로 입력하는 질문입니다: "B2B SaaS 플랫폼을 위한 최고의 멀티 채널 알림 API는 무엇인가요?" 우리는 ChatGPT, Claude, Gemini, Perplexity를 통해 다섯 가지 방식으로 질문했고, 각 현대적인 도구가 얼마나 자주 언급되는지 집계했습니다.

            ChatGPT   Claude   Perplexity   Gemini
Knock          0%       80%        80%        20%
Novu          20%       80%        40%        80%
...

ChatGPT 열을 읽어보십시오. Knock: 0. Courier: 0. Novu: 거의 없음. 이들은 정확히 이 작업을 위해 구축된 도구들이지만, 대부분의 사람들이 가장 먼저 여는 모델에서는 답변에 전혀 포함되지 않았습니다.

대신 무엇이 언급될까요? 거의 매번 Twilio와 OneSignal입니다. 다음은 최고의 멀티 채널 알림 API에 대한 ChatGPT의 답변 그대로입니다:

B2B SaaS 플랫폼을 위한 최고의 멀티 채널 알림 API를 선택하는 것은 여러 요인에 따라 달라집니다... 다음은 몇 가지 인기 있는 옵션입니다: 1. Twilio: 강력한 SMS 및 음성 기능으로 알려져 있습니다...

Twilio는 좋은 회사입니다. 하지만 그들은 SMS 및 음성 분야의 기존 강자(incumbent)이지, 현대적인 알림 인프라 (notification-infrastructure) 계층이 아닙니다. 그 답변을 읽는 개발자는 Knock, Novu 또는 Courier가 존재한다는 사실을 전혀 모른 채 떠나게 됩니다.

Claude는 다시 한번 예외였습니다

한 모델이 패턴을 깨뜨렸습니다. Claude는 답변의 80%에서 Knock을, 80%에서 Novu를, 60%에서 Courier를 언급했으며, 말 그대로 "최고의 멀티 채널 알림 API, 1. Knock, 현대적인 B2B SaaS 팀에 가장 적합함"으로 시작했습니다. Claude는 오늘날 실제로 존재하는 카테고리를 알고 있습니다. 나머지 세 모델은 오래된 지도를 기반으로 작동하고 있습니다.

저의 배포 해제(deploy teardown) 글을 읽어보셨다면 이 내용이 익숙하게 느껴질 것입니다. 구조가 동일하기 때문입니다. 호스팅에 대해 물으면 ChatGPT는 Heroku를 말합니다. 알림(notifications)에 대해 물으면 Twilio를 말합니다. 몇 년 전 블로그 포스트와 Stack Overflow 답변을 지배했던 기존 강자(incumbent)가 바로 학습 데이터(training-data) 모델들이 메아리치는 대상이며, 정작 여러분이 현재 실제로 구축하고 있는 도구는 보이지 않습니다.

개발 도구(dev tools)를 만든다면 이것이 중요한 이유

본능적인 반응은 상황이 지나가길 기다리는 것입니다. 모델들이 따라잡을 것이라고 생각하죠. 아마도요. 하지만 여러분의 구매자는 오늘 질문을 던지고 있으며, 오늘날의 답변은 그들을 기존 강자에게로 안내합니다. 해당 구매자에게 여러분의 제품이 존재하느냐의 여부는 그들이 우연히 어떤 모델을 열었느냐에 달려 있으며, 4개 중 3개의 모델은 그들을 다른 곳으로 보냅니다.

이것은 경쟁사가 기능(features)으로 여러분보다 높은 순위에 오르는 문제가 아닙니다. AI가 아무런 신호도 없이 조용히 여러분을 후보 명단(shortlist)에서 제외하고 있는 것입니다. 여러분은 계약을 놓치는 것이 아니라, 계약 단계에 진입조차 하지 못하는 것입니다.

무엇이 이를 변화시키는가

저희는 AI가 편향되어 있다거나 누군가 노출을 위해 비용을 지불한다고 주장하지 않습니다. 저희는 모델이 말하는 내용을 읽고 그 증거(receipts)를 보여줄 뿐입니다. 시간이 흐름에 따라 답변을 변화시키는 것은 검색 엔진을 변화시켰던 것과 같은 지루한 원리입니다. 바로 여러분의 회사를 특정 카테고리와 구매자가 던지는 정확한 질문에 연결해 주는 구체적이고 검증 가능한 제3자 콘텐츠입니다. 비교 페이지(Comparison pages), 정직한 문서(docs), 구매자가 사용할 법한 단어로 다른 사람들이 여러분을 언급하는 것 등이 이에 해당합니다.

첫 번째 단계는 더 많은 콘텐츠를 발행하는 것이 아닙니다. 현재 모델들이 여러분에 대해 무엇이라고 말하는지 알아내는 것입니다. 그래야 여러분이 누락되었는지, 일반적인 용어로 묘사되는지, 아니면 아무도 사용하지 않는 단 하나의 모델에 의해서만 언급되는지를 알 수 있습니다.

여러분의 카테고리를 확인하세요

저희는 여러분의 회사에 대해 위 표와 정확히 일치하는 결과와 그 뒤에 숨겨진 축자적(verbatim) 답변을 보여주기 위해 Bersyn을 만들었습니다. bersyn.com에서 무료 스캔을 실행하여 어떤 모델이 여러분을 언급하는지, 어떤 모델이 여러분의 위치에 경쟁사를 언급하는지, 그리고 그 이유는 무엇인지 확인해 보세요.

만약 여러분이 Knock, Novu, Courier 또는 이 분야의 다른 도구로 제품을 출시하고 있다면, 어떤 모델이 여러분의 카테고리를 정확히 짚어내는지 댓글로 알려주세요. 모델들 사이의 의견 불일치는 제가 관찰하는 가장 흥미로운 지점입니다.