入口頁的抓取频次突然掉下来，很多人第一反應是“被限速了”。但抓取频次下降至少有三種可能：被限速、抓取预算缩减、搜尋蜘蛛整体調度變化。這三種情况的處理方式完全不同，先分清再動手，比盲目改頁面有效得多。
一、先分清限速和抓取预算下降
限速通常表現為：服務器返回 429 或 503，同一来源的請求間隔被明顯拉長，單位時間請求數下降，但蜘蛛仍然規律出現。
抓取预算下降則更像是“来的次數没變，但每次抓的頁數變少”，或者只在固定时段来一次。這種情况往往和入口頁质量、連結结构、站点整体抓取健康度有關，不是單纯被限速，改服務器没有用。
二、日誌里的常见信号
- 出現 429、503，且来源 UA 確認為搜尋蜘蛛
- 請求間隔從几秒變成几十秒甚至几分钟
- 單次訪問抓取的 URL 數從几十條掉到個位數
- 入口頁本身抓取正常，但目标 URL 几乎不再被跟進
不同搜尋引擎對限速阈值的規則並不公開，日誌現象只能作為推断依據，不能当成定论。
三、恢复時間取决于這几個變量
- 站点整体抓取健康度：長期稳定的站点，一般几天到两周能看到频次回升；频繁改動的站点會更久。
- 限速原因：如果是服務器超时、错誤返回導致的，修好之後恢复相對快；如果是入口頁被判定低质，恢复周期會被明顯拉長。
- 入口頁變更频率：恢复期频繁換連結、換结构，等于每次都在重置观察期。
- 目标 URL 的质量：全是低质、打不開或内容重复的頁面，即使入口頁恢复抓取，跟進也會很慢。
没有任何工具能承诺具体天數，把预期放在“周”這個量級比較現實。看到指數級回升的说法，基本可以忽略。
四、恢复期该做什么
- 先修服務器：把入口頁响應時間压到一秒以内，避免 5xx、429 反复出現；如果确實需要限流，返回 429 时带上重试時間提示。
- 保持入口頁稳定：這段時間不要大改模板、不要批量替換連結。
- 控制新增 URL：目标連結數量压到入口頁能稳定承载的范围，宁可少而稳。
- 复查 robots 與 meta：確認没有誤封、誤加 noindex。
- 看日誌，而不是反复提交：重复提交不會加快恢复，反而可能加重服務器负担。
五、不该做的事
- 短時間内挂上大量新域名做入口頁
- 在同一頁堆几百條連結，或者把入口頁做成纯連結列表
- 频繁改動 URL 结构和連結寫法
- 用伪装 UA 之類的办法“试探”搜尋引擎
這些做法容易让入口頁被归到低质一類，恢复期只會更長。
六、用三個指标跟踪恢复進度
每天固定時間導出一次日誌，重点看：搜尋蜘蛛的請求總數、單次訪問的平均抓取 URL 數、目标 URL 被首次抓取的比例。
如果三個指标同方向缓慢回升，說明确實在恢复；如果只有請求總數回升，另外两個不動，說明抓取回来了但信任還没回来，重点要放回入口頁质量和目标 URL 本身。
最後提醒一句：入口頁只是發現通道，真正决定能不能被收錄的，還是目标 URL 的内容和可訪問性。抓取频次恢复，不等于收錄就會跟着来。