标签：Vary头

CDN 缓存与抓取：蜘蛛每次拿到的是哪一份 HTML

蜘蛛的请求通常先到 CDN 或反向代理，命中缓存就直接返回，不一定回源。缓存键、Vary 头、边缘机器人规则、地域跳转和缓存过期策略，都会影响蜘蛛最终拿到的页面版本。本文梳理这一层常见的几处变量，并给出一份可执行的自查清单。