很多人搭蜘蛛池时，注意力放在入口頁内容和連結埋点上，很少专门想跳轉這件事。但入口頁和目标 URL 之間如果隔着跳轉，蜘蛛每一次抓取都要多花一個来回；跳轉寫得不對，還可能让已经抓到的頁面白抓。
蜘蛛遇到跳轉时會做什么
主流搜尋引擎蜘蛛對 3xx 狀態碼的處理逻辑大致相似：收到跳轉响應後讀取 Location 头，把新地址放進待抓队列，然後結束目前這次請求。也就是说，一次跳轉至少要消耗两次抓取机會，而且第二次抓取不一定紧接着發生。
- 301（永久跳轉）：蜘蛛通常會把信号传递到新地址，並逐步用新 URL 替換索引里的舊 URL。
- 302 / 307（临时跳轉）：蜘蛛會抓新地址，但一般保留舊 URL 的索引，並反复抓舊地址確認是否還在跳。
- meta refresh 與 JS 跳轉：需要解析 HTML 或执行脚本之後才發現，延迟更高，部分蜘蛛可能不跟進。
入口頁该用哪種跳轉
入口頁本身就是内容頁
這種情况不需要跳轉，直接把目标連結寫在正文里，让蜘蛛在同一個頁面上發現 URL，成本最低。加一层跳轉反而多一次請求。
确實需要轉到另一個域名或目錄
優先用 301。前提是源地址和目标地址都由你控制，跳轉關系稳定，不會過两天又改回来。反复在 301 和 302 之間切換，會让蜘蛛對這批 URL 的判断變差。
什么时候才考虑 meta refresh
只有在服務器层拿不到跳轉權限（比如纯静態托管、無法配置响應头）时才考虑。能用 301 就不要用 meta refresh，能用 meta refresh 就不要用 JS 跳轉。
跳轉层級：几跳算多
單跳（A→B）是常態，两跳（A→B→C）多數蜘蛛還能接受，超過三跳就明顯吃亏：蜘蛛可能中途放弃，日誌里會留下大量只走完第一跳的来訪记錄。建议把入口頁到最终落地頁的跳轉控制在两跳以内，理想是一跳到位。
常见失誤
- 循环跳轉：A→B→A，蜘蛛會反复抓，白白消耗抓取预算。
- 跳轉到已失效地址：跳轉目标返回 404 或超时，等于把蜘蛛引到死路。
- 跳轉到不相關的站点：跨主题、跨語言跳轉容易顯得突兀，也可能触發風控。
- 所有入口頁跳同一個目标：跳轉關系過于集中，不如让入口頁各自正常輸出連結。
- 跳轉时带上跟踪參數：每跳一次 URL 就多一截，容易生成大量相似地址。
實操建议
- 先確認跳轉是否必要。如果只是想让蜘蛛發現目标 URL，直接放連結比跳轉更划算。
- 需要跳轉时统一用 301，關系确定後不要频繁改動。
- 定期抽查跳轉鏈，確認没有断鏈、循环和多跳。
- 跳轉目标尽量落在同一站点或同一主题域内，避免跨行业。
- 在訪問日誌里按狀態碼筛 3xx，观察蜘蛛是否跟到了第二跳。
跳轉是手段不是目的。入口頁能直接把目标 URL 暴露给蜘蛛，就不要绕這一圈。