标签：缓存配置

蜘蛛池入口页的响应头：Content-Type、Last-Modified 与 Cache-Control 该怎么设

蜘蛛池入口页能否被正常解析，往往在响应头阶段就已定调。本文梳理 Content-Type 与字符集、Last-Modified 与 ETag、Cache-Control 等头部的作用，说明缓存、编码与网关配置里的常见坑，并给出用 curl 自查响应头的简单方法，帮助把 URL 发现这一环做扎实。