标签：缓存与抓取

蜘蛛抓到的是缓存还是源站：CDN 层容易被忽略的几件事

很多抓取问题并非出在内链或 Sitemap，而是 CDN 与缓存层让蜘蛛看到的内容和源站对不上。本文说明缓存命中、缓存键、Vary 与错误状态缓存如何影响蜘蛛的判断，并给出用蜘蛛 UA 对比源站、检查缓存头、核对回源的排查顺序，帮助把抓取问题的定位范围缩小。