2026년 6월 16일

None

저는 이 사이트의 패싯 검색 엔진 (faceted search engine)을 크롤러들이 공격적으로 스파이더링 (spidering)하는 것을 방지하기 위해 Cloudflare의 CAPTCHA (요즘은 "Web Application Firewall > Custom rules > Managed Challenge"라고 부릅니다)를 사용하고 있습니다. 하지만 단순한 ?q=term 검색조차 챌린지 (challenge)를 트리거하는 것에 진저리가 났습니다.

Claude Code로 이것저것 시도해 본 결과, 대신 다음과 같은 규칙을 등록할 수 있다는 것을 알아냈습니다. 이렇게 하면 적어도 하나의 앰퍼샌드 (&)를 포함하는 검색 URL에 대해서만 CAPTCHA가 작동하게 됩니다:

(http.request.uri.path wildcard r"/search/*" and http.request.uri.query contains "&")

이제 /search/?q=lemur는 CAPTCHA를 트리거하지 않고 정상적으로 작동합니다!