为什么新池子不适合一上来就灌量
新建的入口页、新启用的域名和 IP，对搜索引擎来说都是陌生资源。抓取频率和抓取预算不是靠一次投放就能建立的，它需要在多次访问中逐步累积。很多人在池子搭好当天就把几万条 URL 全铺上去，结果日志里只看到入口页被反复抓取，目标页几乎没有动静，还把后面几天的判断基准一起打乱了。
冷启动阶段真正要拿到的，不是"立刻被大量抓取"，而是一个可观察、可复现的抓取节奏。有了这个基准，后面加量、换资源、调结构才有对照。
第一周可以分成三个阶段走
第 1—2 天：只放入口页
先准备一到三个入口页，不挂目标 URL，或者只挂极少量。这个阶段的目的是确认基础条件没问题：页面能正常返回 200，robots 和 meta 没有挡住抓取，DNS 和证书配置正确，页面本身有基本内容而不是一层空壳。然后观察有没有蜘蛛来访问，访问间隔大概是什么水平。
第 3—4 天：小批量挂目标 URL
入口页确认可达之后，再往上挂少量目标 URL，比如每个入口页五到二十条。这时候重点看的是有没有出现第二层抓取。如果蜘蛛只抓入口页，不往下走，说明入口页到目标 URL 的链接不好被识别，或者在层级、跳转方式上存在问题，需要先解决这一层，而不是继续加量。
第 5—7 天：按日志反馈分批加量
如果第二层抓取已经出现并且相对稳定，就可以开始加量。加量建议分档，比如每天提高一档，而不是一次性翻几倍。每次加量前记录好当时的 URL 数量、入口页结构和投放时间，加量后再看几天日志，确认抓取没有明显下滑，再进入下一档。
冷启动期值得盯的几个信号
- 入口页是否被真实抓取，而不是只看服务器的总请求数
- 目标 URL 是否出现了第二层甚至第三层的抓取记录
- 抓取的时间间隔是否大致稳定，还是忽冷忽热
- 日志里有没有集中的 4xx 或 5xx，影响蜘蛛继续深入
- 请求是否来自少数几个 UA 和 IP，避免把普通爬虫当成搜索蜘蛛
这几点不需要每天全看，但至少要在每次加量前后各查一次。只看总量很容易被误导，因为入口页被反复抓取也会让请求数看起来不错。
几个容易踩的坑
- 第一天就铺满 URL。数据量大但层级不清晰，出问题时很难判断是哪一环导致的。
- 只看总请求数。总量上涨但目标页零抓取，等于没有推进。
- 没动静就立刻换域名换 IP。新资源本来就需要一段时间被识别，频繁更换会让前面的积累归零。
- 加量的同时改入口页结构。两个变量一起动，抓取变化就无法归因。
- 多个池子互相导流量。信号搅在一起，看不出单个池子真实的表现。
冷启动期的核心不是跑得快，而是每一步都能留下可对比的记录。加量、改结构、换资源，尽量一次只动一个变量。
把第一周当成建立基准
第一周结束后，你手里应该有一份简单的对照：入口页数量、目标 URL 数量、出现的抓取层级、大致访问频率。这份记录不会直接带来收录或排名，但它决定了你后面加量时是有依据地推进，还是凭感觉反复折腾。对蜘蛛池这类需要长期观察的工具来说，能稳定复现的节奏，比一次性的投放量更有参考价值。