蜘蛛池的价值建立在“蜘蛛能顺利访问入口页”这件事上。入口页数量再多、内容再像样，如果蜘蛛来的时候拿到超时、5xx 或者一张证书错误页，这一轮抓取基本就浪费了。备用入口和故障切换算不上高级技巧，更像是管道维护：平时用不上，出事时决定损失大小。
先分清是“打不开”还是“打得开但不对”
很多人一发现蜘蛛访问量下降就换域名，其实问题可能完全不在域名上。常见的不可用类型大致有这么几种：
- 解析层问题：DNS 解析失败、解析被污染、多地解析结果不一致，蜘蛛在部分区域直接连不上。
- 传输层问题：证书过期或链不完整，蜘蛛拿到握手失败；或者连接超时、首字节时间过长被主动放弃。
- 源站问题：源站 5xx、数据库拖死、回源失败导致 CDN 返回旧版本或错误页。
- 拦截问题：WAF 把蜘蛛 UA 当成异常流量，返回 403 或人机校验页，看着“有响应”，实际不是内容。
判断方法很朴素：从不同地区、不同网络分别访问入口页，看返回的状态码和内容；再对照自己的访问日志与 CDN 日志，确认蜘蛛这一类 UA 拿到的到底是哪一档响应。把原因定位清楚，后面的切换才有意义。
备用入口的几种形态
备用入口不是简单多建一个域名，按成本从低到高可以这样排：
- 备用路径：同一个域名下另开一条路径，成本最低，适合源站级别的短时故障。
- 多 A 记录或备用 IP：主 IP 出问题时解析到另一台机器，适合机器级故障。
- 备用域名：完全独立的域名和空间，隔离程度最高，但要提前把内容和内链理顺。
- 兜底静态页：源站整体不可用时仍能返回一个可访问的 HTML，让蜘蛛至少拿到一次有效响应。
这几种不是选一个就行，通常是组合使用：路径做快切，IP 做机器冗余，域名做最后一道保险。
故障切换的配置要点
切换要快，但别快得失控。几个容易被忽略的地方：
- DNS TTL：提前调低，留出传播时间，但不要低到几十秒，否则解析压力大、稳定性反而差。
- 健康检查：多 A 记录要配合健康检查，否则故障 IP 还在轮询里，请求失败率一直下不来。
- CDN 回源：回源失败时返回什么，要提前定好。默认返回上一版缓存，可能让蜘蛛长期抓到过期内容。
- 兜底页：轻量、可访问、状态码合理即可，不要用一整套内容页去充当兜底页，避免和正常页面混在一起。
切换时容易踩的坑
- 整站 301 跳到备用域名，短期产生大量跳转，反而增加蜘蛛的理解成本。
- 备用入口和主入口内容一模一样，重复度上升，抓取效果打折。
- 切换后内链还指向旧路径，形成一串 404。
- 源站已经挂了，却用 200 返回一个错误提示页，蜘蛛会把错误内容当成正文。
- 日志被拆成两份，事后完全对不上蜘蛛到底访问过什么。
日常要盯的几个指标
- 各入口页的可用性与首字节时间，按小时看趋势而不是只看平均值。
- 蜘蛛访问的状态码分布，5xx 和 403 的比例涨了就要查。
- 证书到期时间，提前一个月处理。
- 多地 DNS 解析结果是否一致。
写在最后
备用入口是保险，不是主力。它解决的是“蜘蛛来了不能空手而归”的问题，不能解决内容和结构本身的问题。把可用性做扎实，再谈抓取频次和收录，顺序上会顺很多。