收录量不是每天都稳定上涨的。某天打开索引报告，发现总收录数比上周少了一截，很多人的第一反应是“被惩罚了”。但收录量下降只是一个结果，背后可能是抓取侧的变化，也可能是索引侧的筛选，还可能只是统计口径的波动。先把这三件事分开，排查会清晰很多。
抓取和收录是两件事
抓取指爬虫来访问并下载页面，收录指页面经过处理后被放进索引、有机会出现在搜索结果里。抓取多了不等于收录一定增加；抓取少了，收录也不一定立刻掉。但收录量突然下降时，抓取日志是最早能给出方向的数据之一。
先查抓取侧有没有异常
打开服务器日志，按天对比搜索爬虫的请求量。如果总请求数明显下降，先看是不是服务器响应变慢或频繁超时，导致爬虫主动降低访问频率。再看 robots.txt 是否被误改，把整站或大段目录挡在了外面。还要确认网站地图是否正常返回，内链有没有因为改版被大量删除。
- 爬虫总请求数：对比下降前后的每日趋势
- 有效页面请求：是否集中在少数几个 URL 上
- 状态码分布：404、500、503 是否明显增多
- robots 拦截：是否有重要目录被 disallow
再看索引侧发生了什么
如果抓取量没有明显变化，问题更可能在索引侧。常见情况是页面被判定为重复、内容单薄，或者 canonical 指向了另一个 URL，导致目标页面从索引中退出。也有页面被加上 noindex，或者返回了软 404 状态。索引报告里的“已发现，尚未编入索引”“已抓取，尚未编入索引”等状态，能帮助判断卡在哪一步。
另外，索引报告本身有延迟，site 查询的数字也不精确。如果只是报告数字波动，而实际搜索关键词仍能稳定找到页面，不必立刻大动干戈。
按顺序做一轮排查
- 确定下降的时间点和范围：是全站还是某个目录，是移动端还是桌面端。
- 对比同期抓取日志：爬虫来少了，还是来了但不收。
- 抽查典型 URL：用 URL 检查工具看抓取状态、canonical、noindex、渲染结果。
- 检查 robots.txt、网站地图和重要内链入口是否正常。
- 检查内容是否近期被大量复制、改写或合并，导致页面失去独立价值。
- 确认没有误操作后，保持更新和内部链接，观察一到两周。
收录量下降时，最不该做的是批量改标题、堆关键词或短时间上线大量低质页面。这些动作可能让抓取和索引的负担更重。
把 URL 规范先理顺
很多收录问题最后都回到 URL 上。同一内容有多个地址，带参数、带大小写、带尾斜杠的版本混在一起，爬虫和索引系统就要花时间判断哪个是主版本。把站内链接统一到规范地址，canonical 与 sitemap 保持一致，能减少不必要的抓取浪费，也让索引状态更稳定。
收录量有波动是常态。先分清抓取减少还是索引剔除，再按日志、状态码、canonical、内容质量逐项查，比盲目改页面更有效。日常把 URL 规范、内链和网站地图维护好，收录表现通常会更平稳。