網站收錄

收錄率偏低先別全站大改:按模板分组算一遍,看清是局部拖累還是整体問题

整站收錄率低,最忌讳的是马上全站改标题、堆内鏈。先把 URL 按模板分组,分別算出各组的收錄率,再判断是某些模板拖累了平均分,還是整体都上不去。局部問题看内容與重复,整体問题看抓取入口。

網站收錄

收錄率偏低先別全站大改:按模板分组算一遍,看清是局部拖累還是整体問题

看到後台收錄數很少,很多人的第一反應是全站動手:改标题、加内鏈、重寫描述。動作很大,但方向可能是错的。因為一個整站的收錄率,是很多個模板平均出来的结果,平均值低,不代表每個部分都低。

先让"收錄率"變成一個能比較的數

別只看收錄總數,先算比值:某一组 URL 里,有多少進了索引,除以這组 URL 的總數。同一個比值放在不同组之間對比,才有诊断價值。分母建议用你確認過的、真實存在且返回正常狀態碼的地址,不要把參數頁、測試頁混進去,否則算出来的分母是虚的。

按模板分组,而不是全站拉一個平均

一個站点通常只有几種頁面類型,分组並不难。切分的依據可以按下面几種,選一到两種混着用即可:

  • 按頁面類型:文章詳情、栏目列表、商品頁、标簽頁、分頁、归档。
  • 按目錄:把 URL 前缀当作天然的分区,各自統計。
  • 按层級:首頁一层、栏目二层、詳情三层,看是不是越深越差。
  • 按新舊:近三個月新增的與更早的地址分開統計。

分完之後,你大概率會看到某几组的收錄率明顯低于其他组,也可能看到所有组都差不多低。這两種情况的處理方式完全不一样。

局部偏低:先看這一组自己有什么問题

如果只有某些模板收不進去,問题基本在這一组内部。按這個顺序看:

  • 内容是否太薄:整頁去掉導航、推荐、頁脚之後,真正属于這一頁的信息還剩多少。只剩几行字加一堆推荐位,這一组很难被当作獨立頁面看待。
  • 是否與另一组高度重合:标簽頁和栏目頁、篩選頁和分類頁,经常是同一批内容的不同排列组合。同一批内容只需要一個代表地址留在索引里,其余的收不進去是正常的。
  • 组内是否有規范地址:同一篇内容如果有多個入口地址,又没有统一的規范寫法,索引里可能出現轮換,統計时就會表現為"忽收忽不"。
  • 内鏈是否只進不出:這一组的頁面能不能從站内被稳定地鏈到,還是只有列表第一頁有入口。

整体偏低:問题通常在抓取和入口

如果每一组的收錄率都在同一水平线上,那就別在單個頁面上找原因了,要看更上游的两件事:

  • 抓取是否到位:先分清抓取和收錄是两回事。抓取日誌里有它,只說明蜘蛛来過;来没来够、有没有被抓完,又是另一個問题。如果大量地址從来没被抓過,那讨论收錄還為时過早。
  • 抓取配額被谁占着:參數组合頁、無意义的篩選頁、重复的分頁,往往會把配額吃掉,让真正该被看的地址排不上。先把這些低價值地址收一收,通常比新增内容更有效。

一個可执行的核對顺序

  1. 确定分母:列出真實存在、狀態正常的 URL,按模板分组。
  2. 逐组算收錄率,找出最低的那一两组。
  3. 如果差异明顯,先集中處理這一两组的内容厚度、重复和規范地址。
  4. 如果各组持平且都低,轉去查抓取量和入口深度,而不是繼續加内容。
  5. 處理完观察一段時間,用同样的分组再算一次,看變化是否發生在你预想的组里。
收錄率是结果,不是原因。先分组,再归因,最後才動手改頁面。分组算過的站点,改起来往往比全站翻新的站点省力得多。

最後提醒一句:分组統計的目的是缩小范围,不是给每個模板定死指标。不同模板本来就该有不同的收錄预期,栏目頁和詳情頁的合理值不在一個量級上。