發現某篇文章迟迟不進索引，很多人的第一反應是回去改标题、加内容、調關鍵詞。但如果被卡住的不止一篇，或者内容质量相近的頁面表現差异很大，問题往往不在那一頁，而在全站层面。先分清是單頁問题還是站級問题，能省下大量無效修改。
先做横向對照，再决定從哪下手
不要只盯着一個 URL。把最近發布的十几二十個頁面拉出来，按發布時間和頁面類型分组，看三件事：
- 是只有個別頁面慢，還是同一批頁面都慢；
- 是某個栏目慢，還是全站都慢；
- 是老頁面更新後反應也慢，還是只有新頁面慢。
如果同一批、跨栏目、新老頁面都慢，基本可以判断是站級問题。反過来，只有某個栏目或某類模板的頁面慢，更可能是單頁或模板层面的問题。
站級問题常见的几種表現
抓取频次被低價值 URL 稀释
搜尋蜘蛛每天用在站上的抓取量不是無限的。如果站内存在大量參數頁、篩選结果頁、空结果頁和重复列表頁，抓取請求會先被這些 URL 消耗掉，真正有内容的頁面只能排队。表現是日誌里抓取次數不少，但抓到的多是没什么價值的地址。
服務器响應不稳定
如果頁面的响應時間经常超過两三秒，或者偶發 5xx、超时，抓取會主動降速。這種降速是全站性的，不會只影响某一個頁面，但感知上往往体現在“新頁面迟迟不来抓”。
内鏈结构把新頁面放在了邊缘
新頁面如果只能從深层列表頁進入，或者入口只有一個不常更新的聚合頁，被發現的優先級就會偏低。检查新頁面距离首頁的点击深度，以及是否有稳定的站内入口。
站点整体信号偏弱
外鏈、真實訪問、歷史内容质量這些站級信号會影响抓取的积极程度。新站或長期内容稀薄的站点，抓取频次本身就低，此时單頁再怎么優化，能起的作用也有限。
單頁問题通常長什么样
如果對照下来只有個別頁面慢，可以按下面的顺序查：
- 這個 URL 是否被 robots.txt 或頁面上的 noindex 挡住；
- 頁面内容是否與站内其他頁面高度重合；
- canonical 是否指向了別的地址；
- 頁面是否有明确的站内入口，而不是孤岛。
這几点都正常，再考虑内容本身是否太單薄。
處理顺序：先收口，再優化
站級問题的處理往往比改頁面更慢，但優先級更高。比較合理的顺序是：先清理明顯低價值的 URL，比如空结果頁和重复參數頁，把抓取請求让出来；再確認服務器响應稳定；之後才考虑内鏈和頁面本身的調整。如果顺序反了，頁面改了一轮而抓取环境没變，结果通常也不會有明顯變化。
收錄速度没有统一标准。站級抓取环境改善後，通常需要一段時間才能在日誌和收錄狀態上看到變化。把观察周期拉到几周，比每天刷新更有參考價值。