페이지가 없다고 해서 사이트의 Google 순위가 자동으로 하락하는 것은 아닙니다. Google은 최근 가이드라인을 통해 데드 URL(dead URLs)을 정확하게 처리하고, 방문자가 페이지를 찾지 못했을 때 도움을 주는 것에 중점을 두고 있습니다.
[Search Engine Journal’s report on custom 404 pages]에서 요약된 Google 주최 토론회에서, Gary Illyes와 Cherry Prommawin은 404 오류가 웹의 정상적인 일부라고 설명했습니다. 그들의 실질적인 메시지는 간단합니다. 진정으로 관련성 있는 대체 페이지가 있을 때만 URL을 리디렉션(redirect)하고, 그렇지 않다면 404 또는 410 상태 코드를 반환하며, 에러 페이지 자체를 해당 페이지에 도달한 사람에게 유용하게 만들어야 한다는 것입니다.
이러한 구분은 역사적으로 보고되는 모든 404 오류를 제거해야 할 긴급 결함으로 취급했던 SEO 팀들에게 중요합니다. 더 깔끔한 프로세스는 사용자 경험을 보호하는 동시에, 크롤링(crawling) 및 인덱싱(indexing)에 필요한 상태 코드(status codes)의 의미를 유지할 수 있게 합니다.
데드 URL에 대한 Google의 3단계 접근 방식
이 가이드라인은 누락된 콘텐츠가 실제로 어떻게 되었는지에 따라 세 가지 결정으로 요약될 수 있습니다.
- 관련 대체 페이지가 있을 때 리디렉션(Redirect)합니다. 오래된 제품, 기사, 위치 페이지 또는 자료가 실질적으로 동일한 필요를 충족하는 페이지로 이동했다면, 리디렉션을 통해 사용자와 검색 엔진을 적절한 목적지로 안내할 수 있습니다.
- 대체 페이지가 없을 때 404 또는 410을 반환합니다. 404는 해당 리소스가 발견되지 않았음을 의미합니다. 410은 해당 리소스가 사라졌음을 신호합니다. 이전 URL이 더 이상 존재해서는 안 되는 경우, 이 두 가지 모두 유효한 응답입니다.
- 유용한 커스텀 404 페이지를 제공합니다. 내비게이션(Navigation), 사이트 검색(on-site search), 그리고 관련 섹션으로의 링크는 방문자가 사이트를 포기하는 대신 여정을 계속하도록 도울 수 있습니다.
핵심은 '관련성'입니다. 사용 불가능한 URL을 관련 없는 홈페이지, 카테고리 또는 인기 기사로 리디렉션하면, 누락된 리소스를 가릴 수는 있지만 방문자의 문제를 해결하지는 못합니다. 또한 사이트의 실제 URL 이력과 콘텐츠 수명 주기를 이해하기 더 어렵게 만듭니다.
404 오류가 자동으로 SEO 문제가 아닌 이유
Google의 입장은 404 및 410 응답이 정상적인 신호라는 것입니다. 이는 크롤러에게 해당 URL에 사용 가능한 리소스가 없음을 알려줍니다. 일부 URL에서 찾을 수 없음(not-found) 응답이 반환된다고 해서 사이트 전체가 페널티를 받는 것은 아닙니다.
이는 우발적인 서버 오류와는 다릅니다. 서버 오류는 Google이 콘텐츠에 안정적으로 접근하는 것을 막을 수 있으며, 기술적인 조사가 필요할 수 있습니다. 올바르게 제공된 404 또는 410은 의도적이고 이해 가능한 상태를 전달합니다. 즉, 해당 콘텐츠가 이용 불가능하다는 것입니다.
또한 보고서에는 404 오류가 서버 오류와 같은 방식으로 크롤링 예산(crawl budget)을 소모하지 않는다는 Google의 견해도 언급되어 있습니다. 하지만 이는 팀이 모든 찾을 수 없는 URL을 무시해야 한다는 의미는 아닙니다. 대량의 예상치 못한 404 오류는 여전히 깨진 내부 링크, 잘못된 마이그레이션, 만료된 캠페인, 형식이 잘못된 URL 또는 누락된 에셋 등 좋지 않은 사용자 경험을 초래하는 문제를 드러낼 수 있습니다.
유용한 질문은 “어떻게 하면 404 보고서를 사라지게 만들까?”가 아닙니다. “어떤 누락된 URL이 피할 수 있는 여정 실패를 나타내며, 어떤 것이 폐기된 콘텐츠를 정확하게 나타내는가?”입니다.
유용한 커스텀 404 페이지의 역할
커스텀 오류 페이지는 누락된 콘텐츠를 복구할 수는 없지만, 다음 행동을 명확히 할 수 있습니다. Google은 사용자 중심적인 접근 방식을 권장하며, 보고된 논의는 특히 탐색(navigation), 검색(search), 그리고 관련 콘텐츠로 연결되는 링크에 초점을 맞추고 있습니다.
대부분의 사이트에서 커스텀 페이지는 요청한 페이지가 이용 불가능하다는 점을 명확히 밝히면서도 익숙한 브랜딩과 사이트 탐색 기능을 유지해야 합니다. 이후 다음과 같은 제한적인 복구 경로를 제공할 수 있습니다:
- 찾고자 하는 것이 무엇인지 아는 방문자를 위한 사이트 검색 옵션.
- 주요 섹션, 제품 카테고리, 문서 또는 현재 리소스에 대한 링크.
- 사이트가 주변의 관련 목적지를 안정적으로 추론할 수 있는 상황적 제안(Contextual suggestions).
- 특히 지원 중심, 출판사, 또는 이커머스 사이트의 경우, 깨진 링크를 신고하는 방법.
페이지가 마치 원래 콘텐츠가 여전히 존재하는 것처럼 보이게 해서는 안 됩니다. HTTP 응답 자체는 오류 메시지를 담은 성공적인 페이지 응답을 반환하기보다는, 진정한 404 또는 410 상태 코드를 유지해야 합니다. 후자의 패턴은 소프트 404(Soft 404)를 만들 수 있는데, 이는 Google이 다른 응답 신호에도 불구하고 누락된 것처럼 보이는 페이지로 인식하는 경우입니다. 소프트 404는 크롤링 동작에 영향을 미칠 수 있으므로 조사할 가치가 있습니다.
리디렉션 및 폐기된 콘텐츠를 위한 실용적 워크플로우
리디렉션 결정은 재설계 후 일회성 정리 작업이라기보다는 지속적인 사이트 유지 관리의 일부일 때 가장 효과적으로 작동합니다. 내부 링크, 외부 추천(referral), 사이트 이전(migration), 단종된 재고, 오래된 캠페인 URL을 포함하여 누락된 URL 트래픽의 출처를 검토하는 것부터 시작하세요.
그런 다음 의미 있는 각 URL을 분류하십시오:
- 이전되었거나 대체됨: 원래 의도를 충족하는 가장 가까운 페이지로 리디렉션합니다.
- 동등한 대안 없이 영구적으로 폐기됨: 404 또는 410을 제공하고 커스텀 페이지를 통해 복구 옵션을 제공합니다.
- 내부적으로 깨짐: 내부 링크를 수정하거나 제거한 다음, 리디렉션이 필요한지 결정합니다.
- 알 수 없거나 형식이 잘못됨: 서버가 얇은 대체 페이지(thin substitute pages)를 생성하기보다는 적절한 '찾을 수 없음' 응답을 반환하는지 확인합니다.
이러한 접근 방식은 리디렉션 체인(redirect chains)과 무분별한 리디렉션이 시간이 지남에 따라 축적되는 것을 방지합니다. 또한 방문자가 요청한 URL과 사이트가 실제로 제공할 수 있는 콘텐츠 간의 더 명확한 관계를 보존합니다.
AI 지원 검색 및 GEO 관련 중요성
본 가이드라인에는 세련된 404 페이지가 AI 생성 답변에서 가시성을 직접적으로 향상시킨다는 증거는 없습니다. 방어 가능한 GEO적 함의는 간접적입니다: 신뢰할 수 있는 URL 관리는 웹사이트를 사람과 크롤러 모두에게 탐색하고, 이해하며, 유지하기 쉽게 만듭니다.
검색 가시성(search visibility), 인용(citations) 또는 브랜드 발견을 지원하는 콘텐츠의 경우, 안정적인 URL과 정확한 상태 코드(status codes)는 모호성을 줄여줍니다. 폐지된 페이지가 단순히 404 오류를 피하기 위해 관련 없는 목적지로 광범위하게 연결되어서는 안 됩니다. 반대로, 현재 대체할 수 있는 페이지가 존재하는 경우에는 그것이 명확하게 접근 가능해야 합니다. 이러한 방법들은 일반적인 검색 경로와 AI 지원 여정 전반에 걸쳐 일관된 콘텐츠 아키텍처를 지원합니다.
과거에 링크나 추천을 유도했던 페이지의 경우, 관련성 높은 후속 페이지가 해당 방문자들에게 유용한 경로를 보존할 수 있습니다. 만약 대체 페이지가 없다면, 도움이 되는 404 페이지는 사용자에게 사이트 내부로 돌아갈 정직한 방법을 제공합니다.
만약 데드 URL(dead URLs), 소프트 404(soft 404s) 및 불분명한 대체 경로가 콘텐츠 아키텍처를 복잡하게 만들고 있다면, GEO Search Leads 계정 만들기를 생성하여 웹사이트의 GEO 준비 상태 평가하기를 시작하고 최적화 기회를 파악해 보세요. 체계적인 검토는 모든 유효한 '찾을 수 없음' 응답을 검색 문제로 취급하기보다는, 주의가 필요한 페이지와 여정에 팀이 집중할 수 있도록 도와줄 것입니다.
자주 묻는 질문
404 오류가 구글 순위 하락(ranking penalty)을 유발하나요?
아닙니다. Google은 올바르게 제공되는 404 및 410 응답을 페이지를 사용할 수 없다는 정상적인 지표로 간주합니다. 이러한 존재 자체만으로는 순위 하락을 초래하지 않습니다.
웹사이트는 어떤 경우에 누락된 URL을 리디렉션해야 하나요?
방문자의 필요를 실질적으로 충족시키는 진정으로 관련성 높은 대체 페이지가 있을 때 누락된 URL을 리디렉션해야 합니다. 단순히 404 오류를 제거하기 위해 광범위하거나 관련 없는 리디렉션을 사용해서는 안 됩니다.
404와 410 응답의 차이점은 무엇인가요?
404는 리소스가 발견되지 않았음을 나타냅니다. 410은 해당 리소스가 사라졌음을 나타냅니다. 대체 페이지가 없는 경우 둘 다 적절할 수 있습니다.
커스텀 404 페이지가 사용자에게 도움이 될 수 있나요?
네. 유용한 탐색(navigation), 사이트 내 검색(on-site search), 그리고 관련 섹션으로의 링크는 사용자가 사용할 수 없는 URL에 도달한 후 회복하는 데 도움을 줄 수 있습니다. 해당 페이지는 여전히 진정한 404 또는 410 응답을 반환해야 합니다.
결론 (Conclusion)
Google의 지침은 미적인 정리(cosmetic cleanup)보다 정확성을 선호합니다. 실제 대체가 필요한 경우 리디렉션(redirects)을 사용하고, 진정으로 폐기된 URL에는 404 또는 410 응답을 사용하며, 찾을 수 없는 페이지를 방문자가 계속 이동할 만큼 유용하게 만드세요. 이러한 조합은 더 나은 사이트 유지보수(site maintenance), 명확한 크롤링 신호(crawling signals), 그리고 여전히 사용 가능한 콘텐츠를 통한 더욱 신뢰할 수 있는 경로를 지원합니다.