标签：爬虫诊断

蜘蛛抓到的页面和用户看到的不一样：缓存层带来的差异

站点接入 CDN 或反向代理后，蜘蛛抓到的页面有时和用户看到的不一致：可能是边缘缓存里的旧副本，也可能是一张验证页。本文从请求链路、缓存头、条件请求和防护规则几个角度，说明怎么定位这种差异，以及哪些配置能让抓取路径更稳定。