标簽：抓取内容一致性

搜尋蜘蛛抓取：爬虫 UA 分流與 CDN 缓存命中差异造成的抓取内容不一致排查

同一個 URL 被不同 UA 抓到不同内容，往往不是蜘蛛行為異常，而是 CDN 缓存键與爬虫 UA 分流規則叠加的结果。本文给出從抓取日誌定位差异、区分源站與邊缘层、检查缓存键與识別規則，到修复後驗證响應收敛的完整排查顺序。