그 조언은 어디에나 있으며 그럴듯하게 들립니다. G2, Capterra, AlternativeTo, SaaSHub, Crunchbase, Product Hunt에 제품을 등록하라는 것입니다. 왜냐하면 그곳이 AI 어시스턴트들이 어떤 제품이 존재하는지 학습하는 곳이기 때문입니다.

저는 그 말을 믿고 오후 시간을 통째로 비워두었습니다. 하지만 오후를 보내기 전에 이를 측정해 보았습니다. 측정해 보길 잘했다고 생각합니다. 왜냐하면 제가 가진 데이터에 따르면, 그 조언은 거의 정반대에 가깝기 때문입니다.

제가 측정한 것

저는 ChatGPT, Gemini, Perplexity에게 구매자들이 실제로 입력하는 질문을 실시간 웹 검색 (live web searches)으로 던지고, 각 답변 뒤에 있는 소스 페이지를 기록하는 도구를 실행합니다. 저는 네 가지 소프트웨어 카테고리에 대해 이를 실행했습니다:

• AI SEO 도구 (AI SEO tools)
• 이메일 마케팅 소프트웨어 (Email marketing software)
• 헬프 데스크 소프트웨어 (Help desk software)
• 소셜 미디어 스케줄링 도구 (Social media scheduling tools)

이 중 헬프 데스크와 이메일 마케팅은 전형적인 디렉토리 카테고리입니다. 만약 G2와 Capterra가 AI 답변을 유도한다면, 바로 그곳에서 나타나야 합니다.

총 172개의 소스 인용 (source citations)이 있었습니다. 디렉토리가 얻은 결과는 다음과 같습니다.

단 하나였습니다. 헬프 데스크 소프트웨어 분야에서 단 한 번 인용된 g2.com이었습니다.

네 가지 카테고리 전체를 통틀어 AlternativeTo, Capterra, Crunchbase, SaaSHub, GetApp, Product Hunt, StackShare, Software Advice, TrustRadius, SourceForge는 모두 합쳐 인용 횟수가 0회였습니다.

그렇다면 무엇이 인용되고 있는가

승자들은 일관적이었으며, 제가 예상했던 것들도 아니었습니다.

네 가지 카테고리 모두에서 나타난 Reddit. 헬프 데스크에서 6회, 소셜 미디어 스케줄링에서 6회, 이메일 마케팅에서 4회, AI SEO 도구에서 2회의 인용이 있었습니다. 제가 별도로 측정한 44개의 전체 답변이 있는 제 카테고리에서는 Reddit이 27개 답변에 등장했습니다. 61%입니다.

하나의 니치 (niche)를 제대로 다루는 사람들의 독립적인 큐레이션 (roundups). 일반적인 디렉토리가 아닙니다. 특정 출판물들입니다:

• 이메일 마케팅 (Email marketing): emailvendorselection.com 6, mailtrap.io 5, emailtooltester.com 3
• 헬프 데스크 (Help desk): proprofsdesk.com 4, crm.org 3, thecxlead.com 3
• 소셜 스케줄링 (Social scheduling): statusbrew.com 5, technologyadvice.com 5
• AI SEO: onelittleweb.com 6, freddiechatt.com 4, rankability.com 4, whatagraph.com 4

여러 카테고리에 걸쳐 나타난 두 개의 이름. zapier.com은 이메일 마케팅(6)과 소셜 스케줄링(4)에서 인용되었으며, 제가 설정한 카테고리의 답변 중 7곳에서 별도로 인용되었습니다. pcmag.com은 이메일 마케팅(4)과 헬프 데스크(4) 모두에 등장했습니다. 만약 하나를 공략하여 여러 카테고리에서 효과를 보고 싶다면, 이 데이터상으로는 Zapier의 큐레이션 (roundups)이 가장 그에 가깝습니다.

예상보다 많았던 Quora. 소셜 스케줄링에서 5건, 헬프 데스크에서 3건의 인용이 있었습니다. Quora는 Reddit과 유사하게 조용히 작동하고 있습니다.

왜 이런 결과가 나오는가

저는 그 메커니즘을 추측하고 있으며, 이 부분은 추측일 뿐이며 위의 수치들은 측정된 결과라는 점을 분명히 하고 싶습니다.

디렉토리 등록은 데이터베이스의 한 행 (row)일 뿐입니다. 이름, 카테고리, 가격, 직접 작성한 자기소개 한 단락, 그리고 별점 같은 것들 말이죠. 어시스턴트에게 "어떤 헬프 데스크를 사용해야 하며 그 이유는 무엇인가요?"라고 물었을 때, 데이터베이스의 한 행은 답을 줄 수 없습니다. 하지만 누군가가 왜 2년 만에 Zendesk를 떠나게 되었는지를 설명하는 게시물은 답을 줄 수 있습니다.

인용되는 페이지들은 그 안에 논거 (argument)를 담고 있습니다. 그들은 비교하고, 입장을 취하며, 특정 서비스가 누구에게 적합하지 않은지를 말합니다. 디렉토리는 포괄적이고 중립적이 되도록 구축되었는데, 바로 그 점이 추천을 위한 소스로서 디렉토리를 무용지물로 만드는 이유입니다.

제가 주장하는 바가 아닌 것

4개의 카테고리와 172개의 인용 사례가 인터넷 전체를 대변하는 것은 아니며, 이는 추세라기보다는 카테고리당 한 번의 측정 결과입니다.

디렉토리 등록은 이와 무관한 다른 이유로 여전히 가치가 있을 수 있습니다. 즉, 인간 구매자들은 여전히 Capterra를 탐색하며, G2 배지는 사회적 증거 (social proof)가 되고, 백링크 (backlink)는 그 자체로 백링크이기 때문입니다. 만약 누군가 디렉토리가 AI의 답변을 유도한다는 더 큰 표본을 보여준다면, 저 또한 그 내용을 게시할 것입니다.

제가 방어할 수 있는 것은 좁은 범위의 주장뿐입니다. 이 네 가지 카테고리 내에서, 답변을 생성하는 어시스턴트(Assistants)들은 디렉토리를 읽고 있지 않았습니다. 만약 당신이 제출 작업을 위해 오후 시간을 할애하는 이유가 "ChatGPT가 나를 찾게 하기 위해서"라면, 그 이유는 제 데이터와의 대면 과정에서 살아남지 못했습니다.

대신 그 오후에 제가 한 일

저는 디렉토리 계획을 버리고 인용 횟수(Citation counts)에 맞춰 우선순위를 다시 작성했습니다. Reddit을 첫 번째로 두었는데, 61%라는 수치는 압도적이기 때문입니다. 그다음은 제 데이터에서 이름을 특정할 수 있는 구체적인 모음집(Roundups)들을 대상으로 삼았습니다. 이때는 추가해 달라는 요청이 아니라 측정된 데이터를 바탕으로 접근했습니다. 왜냐하면 그 편집자들은 모두 이 주제에 대해 글을 쓰지만, 그들 중 누구도 이에 대한 데이터를 가지고 있지 않기 때문입니다. 마지막으로 하나의 출판물이 두 번의 효과를 내는 카테고리들을 고려했습니다.

불편한 점은, 제가 측정을 하기 사흘 전에 이미 계획을 써두었으며, 그 계획은 완전히 잘못된 채널을 향해 확신에 차 있었다는 사실입니다.

당신의 카테고리에서 직접 실행해 보세요

당신은 20분 만에 수동 버전을 실행할 수 있으며, 저는 당신이 저를 믿기보다 직접 확인하기를 바랍니다. ChatGPT, Gemini, Perplexity에게 당신의 구매자가 입력할 법한 질문을 던지세요. 각 답변이 인용하는 모든 소스(Source)를 여세요. 그중 디렉토리가 몇 개인지, 그리고 누군가의 의견이 몇 개인지 세어보세요. 그런 다음 그 오후를 어디에 쓸지 결정하십시오.

자동화된 버전은 제가 glotier.com에서 구축하고 있는 것입니다. 무료이며, 카드 등록이나 계정이 필요 없습니다. 이 도구는 세 가지 어시스턴트에게 구매자의 질문을 던지고, 어떤 제품이 언급되었는지와 각 답변 뒤에 있는 모든 소스 페이지를 보여줍니다.

저는 제 데이터의 네 가지 카테고리가 틀렸다고 말하고 있음에도 불구하고, 잘못된 조언을 계속 반복하기보다는 계획된 업무 시간 중 오후 하루를 희생하여 얻은 수치를 발표하는 쪽을 택하겠습니다.