先確認口径：掉量可能只是統計問题

看到蜘蛛来訪量下降，第一反應不该是去改入口頁，而是先確認資料本身有没有變。日誌是否做了切割、时区是否统一、統計的是 UA 還是 IP 段、有没有新加過滤假蜘蛛的規則，這些都會让曲线出現断层。如果最近換過采集方式或加了過滤條件，先按舊口径重新算一遍，再谈掉量。

第一层：入口頁是否還能被正常訪問

這類問题最容易造成整体掉量，因為所有入口頁會一起出問题。按下面几項快速過一遍：

• DNS 是否解析正常，有没有解析到已下线的机器
• HTTPS 證书是否過期，握手是否被中断
• 服務器是否返回 5xx，CDN 回源是否失敗
• 响應時間是维持在几百毫秒，還是已经涨到數秒

如果入口頁整体打不開或變慢，蜘蛛自然會减少来訪，這属于可用性問题，不是内容問题。

第二层：入口頁自身的變化

可用性没問题，就要看入口頁有没有被“改坏”。常见的几處：

• robots.txt 被改動，誤屏蔽了整站或某個目錄
• 頁面里多了 noindex，或者 meta robots 被模板统一覆盖
• canonical 指向被改到別的地址，蜘蛛跟去了別處
• 模板改版後正文變空，入口頁成了只有導航的空壳
• 入口頁被下线，直接返回 404 或 410

改模板或改配置之前，先留一份頁面對比样本。出問题时能快速回滚驗證，比逐條猜测省時間。

第三层：連結與目标頁

蜘蛛是從入口頁上的連結跟進去的。检查連結是否被加上 nofollow、锚点是否指向了不可訪問的目标頁、跳轉鏈是不是變長或中間夹了死鏈。如果目标頁出現大面积 404，蜘蛛對入口頁的抓取兴趣也會跟着下降，因為跟進去拿不到有效内容。

第四层：外部因素與算法波動

搜尋引擎自身的更新、抓取策略調整、同行业站点的整体波動，都會影响来訪量。可以横向對比同行或其他自有站点的曲线：如果大家都在掉，多半不是你一個站的問题；只有你自己掉，才需要回到前面几层繼續查。

告警怎么设才不吵

监控的價值在于准确，而不是數量。几個可落地的做法：

1. 按小时聚合，设“连續两個周期低于基线 40%”再触發，避免單点抖動誤报
2. 分級處理：普通波動只發通知，持續下滑進值班，全站不可用走紧急通道
3. 把總量告警和單個入口頁告警分開，前者看趋势，後者定位具体资源
4. 告警内容里带上最近的變更记錄，注明谁在什么时候改了什么

常见誤区

• 一看到掉量就加资源、換 IP、批量改标题，把正常波動当成惩罚
• 只盯着總量曲线，不看單個入口頁的响應碼分布
• 把統計口径變化当成真實掉量，白排查一轮

小结

排查顺序比工具更重要：口径、可用性、内容、連結、外部因素。把這五步做成清單，掉量时按顺序過一遍，通常几分钟就能把范围缩小到某一层，剩下的才是需要動手處理的部分。