先确认口径：掉量可能只是统计问题

看到蜘蛛来访量下降，第一反应不该是去改入口页，而是先确认数据本身有没有变。日志是否做了切割、时区是否统一、统计的是 UA 还是 IP 段、有没有新加过滤假蜘蛛的规则，这些都会让曲线出现断层。如果最近换过采集方式或加了过滤条件，先按旧口径重新算一遍，再谈掉量。

第一层：入口页是否还能被正常访问

这类问题最容易造成整体掉量，因为所有入口页会一起出问题。按下面几项快速过一遍：

• DNS 是否解析正常，有没有解析到已下线的机器
• HTTPS 证书是否过期，握手是否被中断
• 服务器是否返回 5xx，CDN 回源是否失败
• 响应时间是维持在几百毫秒，还是已经涨到数秒

如果入口页整体打不开或变慢，蜘蛛自然会减少来访，这属于可用性问题，不是内容问题。

第二层：入口页自身的变化

可用性没问题，就要看入口页有没有被“改坏”。常见的几处：

• robots.txt 被改动，误屏蔽了整站或某个目录
• 页面里多了 noindex，或者 meta robots 被模板统一覆盖
• canonical 指向被改到别的地址，蜘蛛跟去了别处
• 模板改版后正文变空，入口页成了只有导航的空壳
• 入口页被下线，直接返回 404 或 410

改模板或改配置之前，先留一份页面对比样本。出问题时能快速回滚验证，比逐条猜测省时间。

第三层：链接与目标页

蜘蛛是从入口页上的链接跟进去的。检查链接是否被加上 nofollow、锚点是否指向了不可访问的目标页、跳转链是不是变长或中间夹了死链。如果目标页出现大面积 404，蜘蛛对入口页的抓取兴趣也会跟着下降，因为跟进去拿不到有效内容。

第四层：外部因素与算法波动

搜索引擎自身的更新、抓取策略调整、同行业站点的整体波动，都会影响来访量。可以横向对比同行或其他自有站点的曲线：如果大家都在掉，多半不是你一个站的问题；只有你自己掉，才需要回到前面几层继续查。

告警怎么设才不吵

监控的价值在于准确，而不是数量。几个可落地的做法：

1. 按小时聚合，设“连续两个周期低于基线 40%”再触发，避免单点抖动误报
2. 分级处理：普通波动只发通知，持续下滑进值班，全站不可用走紧急通道
3. 把总量告警和单个入口页告警分开，前者看趋势，后者定位具体资源
4. 告警内容里带上最近的变更记录，注明谁在什么时候改了什么

常见误区

• 一看到掉量就加资源、换 IP、批量改标题，把正常波动当成惩罚
• 只盯着总量曲线，不看单个入口页的响应码分布
• 把统计口径变化当成真实掉量，白排查一轮

小结

排查顺序比工具更重要：口径、可用性、内容、链接、外部因素。把这五步做成清单，掉量时按顺序过一遍，通常几分钟就能把范围缩小到某一层，剩下的才是需要动手处理的部分。