标签：缓存协商

搜索蜘蛛抓取：缓存协商头与 304 回访对抓取节奏的影响

蜘蛛回访一个已抓过的 URL 时，通常会带上 If-Modified-Since 或 If-None-Match。服务器若判断内容未变，可返回 304 而不传正文，从而减少传输量、降低渲染开销、缩短响应时间。本文说明 304 的作用边界、常见失效原因，以及用日志和命令行核对缓存协商的实操步骤。