标簽：IP 白名單

CDN 與防火墙的誤伤：搜尋蜘蛛被拦在门外怎么排查

搜尋蜘蛛抓不到内容，有时不是連結没铺好，而是被 CDN、WAF 或频控挡在了门外。本文從日誌特征入手，讲清怎么区分“没来”和“来了被挡”，怎么驗證蜘蛛身份，哪些常见配置容易誤伤，以及放行顺序、狀態碼寫法和多站点运营时的核對要点。