站点改版通常從设計稿和栏目規划開始，但搜尋蜘蛛看到的不是版式，而是地址、連結和返回碼。改版期間如果只關注頁面是否好看，很容易出現舊地址失效、新地址無人带路、抓取請求撞在错誤頁上的情况。URL 發現的节奏一旦乱掉，後續抓取和收錄恢复都會變慢。
先梳理地址的進出關系
動手改版前，建议把現有地址分成四類：原样保留、内容搬到新地址、多個舊地址合並到一個新地址、彻底不再需要。每一類對應不同的處理方式，混在一起做，後面就很难判断哪個环节出了問题。
- 保留：地址和内容都不變，尽量不動内鏈，减少無谓的重新發現。
- 替換：舊地址用 301 指向新地址，同时更新站内所有指向舊地址的連結。
- 合並：多個舊地址指向同一個新地址，注意別形成鏈式跳轉。
- 废弃：没有替代内容时，返回 404 或 410，不要统一跳到首頁。
舊地址怎么退场
舊地址退场最怕两種做法：一是全部 301 到首頁，二是直接让大量地址返回 404 却没有任何說明。前者會让蜘蛛把首頁当成萬能落点，模糊了原本的地址關系；後者則會让已经發現過的地址反复被請求，浪費抓取次數。
如果舊内容确實有新家，用一次 301 直達目标地址即可，不要 A 跳 B、B 再跳 C。如果舊内容彻底下线，404 是正常信号，410 更明确，但不必為了追求狀態碼而频繁改動。關键是返回碼稳定，让蜘蛛每次来都能得到同样的答案。
新地址的進场路径
新地址要被發現，通常靠几條路：導航和栏目頁、列表頁、正文内鏈、Sitemap，以及站外已经存在的連結。改版时最容易漏掉的是内鏈更新——頁面模板換了，舊連結却還留在正文或推荐位里，蜘蛛顺着舊連結走，自然到不了新地址。
Sitemap 适合做兜底，但不應该成為唯一入口。一個只出現在 Sitemap、站内没有任何連結指向的新頁面，抓取優先級往往偏低。更稳妥的做法是让新地址至少出現在導航、上級栏目或相關文章里，形成可走通的路径。
過渡期的抓取秩序
改版上线後的一段時間，蜘蛛會同时遇到舊地址、新地址和跳轉關系。這时服務器稳定性比平时更重要：如果响應時間波動大，抓取节奏會被拉長，URL 發現和重新抓取都會延後。建议先確認几件事。
- 舊地址返回碼是否统一，跳轉是否一次到位。
- 新地址是否可以從首頁经過少量点击到達。
- Sitemap 是否只包含目前有效的規范地址。
- 站点日誌里是否還有大量請求打在已废弃的地址上。
通過日誌观察蜘蛛實际走的路，比只看後台提交資料更直接。如果發現某個舊栏目仍被频繁請求，說明站内還有連結没有清理干净，或者外部連結仍在指向它。
几個容易踩的坑
- 改版时把内鏈批量替換成新地址，却忘了分頁、篩選和标簽頁。
- 新舊地址同时可訪問，内容相同，让蜘蛛在两個地址之間来回選擇。
- 跳轉鏈太長，一次改版留下三层以上跳轉。
- Sitemap 更新時間戳乱填，让蜘蛛誤判頁面變化频率。
改版不是一次性動作，而是一段過渡期。舊地址有序退场，新地址有路可走，抓取路径才不會断在中間。
如果改版規模較大，可以分栏目分批上线，给每個阶段留出观察時間。這样即使某個环节的 URL 發現不理想，也容易定位到具体批次，而不是在整站范围内排查。