站点收錄總量出現下滑,是运营中比較常见也容易让人紧張的情况。多數时候它並不是單一原因造成的,而是抓取、索引、质量评估三個环节中某一個發生了變化。在范围還没確認之前就批量改 robots、批量提交 URL、批量換模板,往往會让後續排查更困难。
一、先把口径對齐:三個數字说的不是同一件事
在说“收錄掉了”之前,先確認這句话是基于哪個資料源得出的。
- site: 查询:返回的是一個粗略估算,會随查询词、查询時間、資料中心變化,短期内上下浮動几百條很常见,不适合作為判断趋势的唯一依據。
- 索引覆盖率报告:给出的是分组數量,反映的是統計周期内的狀態,和實时情况之間存在延迟。
- 服務器日誌:记錄的是真實抓取行為,能反映搜尋引擎是否還在持續訪問你的頁面。
只有把這三组資料放在同一時間窗口里對照,才能判断到底是“真的掉了收錄”,還是“統計口径本身在波動”。
二、按影响范围分清三類原因
1. 抓取侧受限
搜尋引擎進不来,後面的收錄就無從谈起。這類問题的典型特征是日誌里的抓取量明顯下降,或者抓取集中在少數几個 URL 上。
- robots.txt 被改動,或誤用了通配符,挡掉了大片路径;
- 服務器响應變慢、错誤率上升,抓取被主動降频;
- 站点结构改版後新的内鏈路径没有铺開,深层頁面失去入口。
2. 索引侧清理
抓取正常,但頁面在索引里被移除。常见于狀態碼變化、canonical 指向改變、頁面被判定為重复版本,或者原頁面内容被替換成了空壳。這類問题通常集中在某個模板或某個栏目,而不是全站均匀分布。
3. 质量评估收紧
抓取稳定、頁面也能正常渲染,但整体收錄比例下降。這種情况往往和内容层面的變化相關,比如大批量低差异頁面集中上线、正文被模板挤压、用戶点击和停留表現持續偏弱。它的特征是缓慢、面状扩散,而不是某一天突然断崖。
三、排查顺序:從范围最小的動作開始
- 確認時間点和幅度:是哪一天開始變的,掉了多少,是绝對值下降還是占比下降。
- 拉日誌看抓取是否同步下降:抓取没降,重点往索引和质量方向找;抓取同步降了,重点往技術侧找。
- 抽样頁面看狀態分布:按栏目、按模板各抽一批 URL,看未收錄集中在哪一類。
- 對照近期改動:模板調整、URL 規則修改、批量内容上线,這些時間点是否和下滑時間吻合。
- 小范围驗證:選定一個栏目做調整,观察两到四周,再决定是否推廣到全站。
四、几種容易誤判的情况
- 把 site: 數字下降直接等同于被惩罚,忽略了它本身的估算属性;
- 把“已發現但尚未编入索引”当成技術故障,實际上它更多反映的是抓取優先級和资源分配;
- 看到部分頁面掉收錄就全站回滚,结果把本来正常的改動也一起推翻;
- 用一周的資料判断趋势,样本太短,噪声大于信号。
五、處理时的几点提醒
確認原因之前,尽量不要同时做多件事。批量提交、批量改 canonical、批量換模板這些動作叠加在一起後,很难再判断是哪一步起了作用。對于确實低價值的頁面,與其反复提交,不如考虑合並或清理入口;對于核心頁面,優先保證可抓取、可渲染、内容完整。
收錄量是结果指标,不是可以直接拨動的開關。它能提示哪個环节出了問题,但不能替代對頁面本身價值的判断。