做收录排查时,最容易犯的错是把“收录量”当成一个可以单独解读的数字。它涨了不一定说明变好,跌了也未必是出了问题——总量受栏目改版、URL 变更、历史页面堆积的影响很大。真正有用的做法,是用一份可控的抽样清单,在同一批 URL 上反复观察状态变化。
为什么只看总量看不出问题
收录总量是结果,不是过程。它由无数个页面的状态汇总而成,任何一次结构调整都会把它拉高或压低。比如把一批分页 URL 合并、把旧活动页清理掉,回收的索引量可能是几千条,但这跟站点健康度没什么关系。反过来,总量平稳的时候,也可能是一批核心页面掉出索引、另一批低质页面补进来。
先确定一份可重复使用的抽样名单
抽样要分层,不是随便抓几个 URL。按栏目、页面模板、发布时间各切一刀,每一层取 20 到 50 个就够用。
- 按模板分:详情页、列表页、专题页、帮助文档,各取一组。
- 按新旧分:最近 7 天发布、30 天前发布、改版前的历史页面。
- 按入口分:首页直达、二级栏目入口、只出现在站点地图里的。
- 把这份名单存下来并标注日期,下次核对时使用同一份。
状态分成三类统计,别混在一起
- 已进索引:能被搜索到,快照内容与当前版本基本一致。
- 被抓但没进索引:日志里有抓取记录,索引里查不到。
- 还没被抓:日志里找不到访问记录,多半是入口不足。
三类占比的变化,比绝对数量更值得关注。如果“被抓未收录”这一档在扩大,说明抓取通道是通的,问题更可能出在页面本身;如果“还没被抓”在扩大,先查内链和站点地图的覆盖,而不是急着改内容。
用同一批 URL 做时间对比
单次体检只能得到一张快照。建议每隔两三周用同一份名单复查一次,记录每个 URL 的状态迁移:从未抓取到被抓取、从被抓取到进索引、从有索引到消失。连续三四轮下来,能看出哪些模板的页面普遍卡在同一个环节,这比逐个页面调优有效得多。
抽样对比看的是趋势和比例,不是精确的收录率。不要拿它去推算“全站收录率是多少”,那样很容易得出错误结论。
容易造成误判的几种情况
- site: 查询返回的数字偏差较大,只适合做粗略参考。
- 索引更新有延迟,刚发布的页面当天查不到属于正常现象。
- 同一内容的不同 URL 版本可能互相替换,看起来像掉收录。
- 需要登录或依赖地域的页面,在外部查询工具里表现会失真。
把结论落到具体动作
体检的价值在于把“收录不好”拆成可执行的问题。若卡在未被抓取,优先补内链入口、精简站点地图;若卡在被抓未收录,回头看内容质量、与已有页面的重复度,以及页面上是否真的需要那么多参数变体。每次只改一到两项,然后等下一轮抽样结果来验证,避免一次性大改之后分不清是哪个动作起了作用。