标簽：304校驗

搜尋蜘蛛抓取：條件請求與 304 校驗異常造成的重复抓取梳理

條件請求是搜尋蜘蛛节省抓取预算的重要机制：携带 If-Modified-Since 或 If-None-Match 訪問时，服務器返回 304 即可跳過正文下载。但 ETag 频繁變化、Last-Modified 失真、CDN 改寫响應头或代理剥离條件头，都會让 304 失效，造成蜘蛛反复全量抓取。本文梳理常见異常表現與從日誌到回源头的排查顺序。