蜘蛛池入口页常常承担分发任务：把蜘蛛从入口地址带到目标页，或者在不同域名、不同活动页之间做切换。这时重定向方式就不只是技术细节，它会直接影响蜘蛛是否继续跟、跟到哪里、原地址的索引怎么变。
蜘蛛对几种跳转方式的处理差异
301 永久重定向
301 是蜘蛛最容易理解的一种。它表示原地址已经永久换到新地址，蜘蛛通常会逐步把新 URL 纳入索引，并把原地址的信号转移到目标页。对入口页来说，如果你确定某个入口地址不再使用，301 一跳到位最干净。需要注意的是，301 链不要拉长，A 跳 B、B 再跳 C，会消耗抓取机会，也可能让蜘蛛中途停下。
302、303、307 临时重定向
临时重定向告诉蜘蛛原地址仍然有效，只是暂时指向别处。蜘蛛一般会继续保留原地址，抓取时可能跟随到临时目标，但不会立刻替换索引。适合短期切换、灰度测试、临时维护。但如果长期挂着 302，索引里可能出现原地址和临时目标并存，入口页的 URL 信号变得模糊。
meta refresh
meta refresh 写在 HTML 的 head 里，常见写法是延迟 0 秒跳到目标页。蜘蛛能识别这种跳转，但它比 HTTP 头跳转弱一层：如果延迟时间设得太长，蜘蛛可能不会等待；如果页面本身内容空洞，只靠 meta refresh 跳走，容易被当成低质量入口。用它做兜底可以，做主跳转要谨慎。
JS 跳转
通过 JavaScript 执行 location 跳转，依赖蜘蛛的渲染能力。蜘蛛不一定每次都执行 JS，或者执行时间点比你预期晚。入口页如果只靠 JS 跳转，蜘蛛很可能停在入口页，看不到目标内容。比较稳的做法是在 HTML 里放一个普通链接作为兜底，让不执行 JS 的抓取也能继续走。
跳转链与跳转目标
- 尽量一跳到位，避免 A→B→C 的链式跳转。
- 跳转目标要和入口页主题相关，不要跳到完全不相关的内容。
- 不要跳到 robots.txt 屏蔽的目录、404 页面或登录墙。
- 避免跳转循环，A 跳 B、B 跳回 A，蜘蛛会反复消耗抓取。
- 跳转目标层级不要太深，减少后续抓取负担。
常见误区
- 用 302 代替 301 做永久迁移，索引长期不更新。
- meta refresh 延迟设成 30 秒甚至更长，蜘蛛早就走了。
- 入口页同时放多种跳转，HTTP 头、meta、JS 互相冲突。
- 跳转到带参数的动态地址，每次跳转都生成新 URL，造成重复抓取。
- 只看浏览器效果，不用抓取日志确认蜘蛛是否真的跟随。
实际配置里的几个建议
- 永久迁移优先用 301，并在服务器层实现，不要靠页面脚本。
- 临时切换用 302，同时明确计划什么时候恢复或转正。
- meta refresh 只做辅助，延迟设为 0，且入口页仍保留可读内容。
- JS 跳转必须配 HTML 链接兜底，避免蜘蛛空跑。
- 跳转上线后用服务器日志核对：蜘蛛有没有请求目标页、返回什么状态码。
- 入口页数量多时，统一跳转规则，减少不同页面行为不一致带来的排查成本。
重定向只是把蜘蛛引到目标页的一种手段，它不能保证蜘蛛一定抓取或收录目标内容。真正决定结果的，是目标页本身的质量、可访问性和整体站点环境。