标簽：WAF配置

爬虫被 WAF 拦在门外：抓取請求進不来时的排查顺序

抓取量下滑时，問题不一定出在内容和内鏈。CDN、WAF、源站防火墙的誤拦會让抓取請求根本到不了源站。本文整理拦截的典型信号、常见發生层級與排查顺序，並给出 IP 驗證、频次留量、路径分級等放行原則，帮助把網絡层與頁面层的排查分開進行。