标签：304缓存协商

蜘蛛池入口页的 304 与缓存协商：蜘蛛第二次来，服务器要不要重发整页

蜘蛛第二次抓取入口页时，请求头里往往多带了 If-Modified-Since 和 If-None-Match。本文讲清 304 在蜘蛛池里到底起什么作用、哪些入口页适合回 304、哪些回 304 反而挡住新内容，以及 Last-Modified、ETag 和 CDN 层常见的几个坑，最后给出用蜘蛛日志验证协商是否生效的方法。