标签：session

蜘蛛池入口页的 cookie 与 session：给爬虫设状态是帮忙还是添乱

搜索爬虫通常不保存 cookie 和 session，入口页如果依赖这些状态才输出链接，爬虫很可能只看到空壳。本文说明哪些访问状态设置会挡住爬虫，以及入口页保持无状态、静态直出的具体做法。