站点改版、更换模板、调整栏目结构之后,索引里的收录数量在几天内明显下滑,是比较常见的情况。数量下降本身不代表改版做错了:如果改版把大量重复的低价值页面合并掉了,收录数减少反而是收敛的正常结果。真正需要核对的是,原本有内容、有搜索表现的正文页,有没有跟着一起掉出去。
第一步:先分清掉的是哪一类页面
不要只盯着“收录总数”这一个数字。把下面几份清单分开列出来,再逐一对比:
- 改版前有搜索展现和点击的页面清单,可以从搜索表现后台按时间段导出;
- 改版前后两版的 sitemap URL 清单;
- 新模板上线后新出现的页面类型,比如标签页、聚合页、筛选参数页。
如果减少的主要是空列表页、重复参数页、无正文的归档页,说明是页面在收敛,属于预期内的变化。如果减少的是原本有内容的详情页,才需要继续往下排查。这一步做完,后面才有方向。
第二步:核对状态码与抓取指令
改版过程中最容易出问题的地方,往往不是内容本身,而是新旧环境切换时被带错的技术细节。
跳转链是否过长
旧地址 301 到中间地址,中间地址再 301 到最终地址,这种接力式跳转在改版中很常见。链路一长,蜘蛛走到中途停止的情况并不少见。建议尽量一步到位,直接指向最终地址,减少中间环节。
指令是否残留
测试环境里用的 noindex 标签、robots 屏蔽规则、指向旧域名或测试域名的 canonical,很容易在上线时被一起带进正式环境。上线后逐个模板检查页面头部的这几处,比事后发现再补救要省事得多。尤其是首页、栏目页、详情页这几类模板,要分别抽一个真实 URL 确认。
新地址是否可访问
有时问题不在指令,而在配置:新地址返回 5xx、证书不匹配、大小写或末尾斜杠变化导致旧地址 404 而非跳转。这些都会直接影响抓取能否完成,进而影响收录。
第三步:看模板改动带来的相似度变化
换模板时,页面可见的独有正文如果变少,而导航、推荐位、页脚、相关阅读占据了大半屏,页面之间的相似度就会上升。同一批页面在索引里的表现会分化:结构清晰、正文完整的继续保留,模板拼凑感强的容易被替换或不再更新。
核对方法比较简单:把同一栏目下的三到五个页面正文摘出来,去掉公共部分,看剩下的独有内容有多少。如果剩余内容很少,说明问题在模板层面,而不是页面本身被处罚。
第四步:确认内链发现路径还在
改版常伴随导航简化,一些原本靠侧栏、面包屑、相关推荐才能被发现的深层页面,可能就此失去入口。原来有三条路径能到,现在一条都没有,发现效率自然下降。
- 抽查几个未被收录的正文页,看是否能从首页在三到四次点击内到达;
- 确认栏目页是否仍然列出子页面链接,而不只是图片或脚本渲染出的入口;
- 确认分页、排序等列表的默认状态没有把老页面挡在后面。
如果发现某批页面确实成了孤岛,优先在相关栏目或正文推荐位补回内链,再观察后续的抓取情况,而不是急着重复提交。
第五步:留出观察窗口,做记录
索引更新本身有滞后,改版后一两天就下结论容易误判。建议以周为单位记录:收录数量、抓取频次、状态码分布、掉出清单里的页面类型。连续观察两到三周,变化趋势会比单日数字可靠得多。
收录数量的短期波动不能单独作为判断依据,把状态码分布、抓取日志和页面清单放在一起看,才更有参考价值。改版后的核对顺序,本质上是先把技术层面的明显问题排掉,再判断内容层面是否需要调整。