入口页铺好之后，真正的问题不是“蜘蛛会不会来”，而是“它第一次从哪儿知道这个 URL”。这件事上，sitemap、外链和主动推送是三条主要路径，时效和稳定性差别很大。三种混着用，比只押注一种更现实。
三条路径的本质区别
- sitemap：把入口页清单放在一个蜘蛛会定期来取的文件里，属于“等着被读”，节奏取决于对方对你的抓取频率。
- 外链：从已被收录的页面指向入口页，属于“顺着链接爬过来”，最慢，但一旦建立就比较稳。
- 主动推送：通过接口或站长工具把 URL 直接交出去，最快，但它只代表“知道”，不代表抓取，更不代表收录。
sitemap 适合批量，不适合救急
入口页数量多、更新有规律的时候，sitemap 是性价比最高的方式。几个细节要注意：单文件 URL 数有上限，超了就拆成多个并写进索引文件；只放返回 200 的地址，把 302、404、带一堆参数的垃圾页塞进去，会拉低整份文件的可信度；lastmod 不要每天无脑刷新，改动才有意义。
但 sitemap 的更新节奏不由你控制。新页放进去，可能几小时被读到，也可能几天。想靠它救急，通常不现实。
外链：慢，却决定长期抓取频率
入口页如果只有 sitemap，没有任何站外指向，抓取很容易停在“偶尔来一次”的状态。外链不需要多，几十条相关站点的真实链接，价值高于几千条目录站垃圾链。两点提醒：链接要能直接到达入口页，不要经过多层跳转；尽量来自与你主题相关、本身已经被收录的页面。
主动推送：适合新页，别当日常手段
推送额度有限，反复推送同一个 URL 通常没有额外收益。它更适合两种场景：一是新上线的入口页集中提交一次；二是页面内容做了实质性改动后重新通知。提交完之后，就该交回给 sitemap和自然抓取。
一套可执行的优先级
- 新入口页上线当天：推送一次，同时写进 sitemap，并确认返回状态码正常。
- 接下来三到七天：查服务器日志，确认有没有真实爬虫 IP 来过，别只看工具里的“已提交”。
- 两三周仍无抓取：补一到两条站外链接，从同主题、已被收录的页面直接指过去。
- 一个月后仍无动作：先排查是否被 robots 屏蔽、是否整站被处理、入口页是否被判定为低质模板，再考虑换域名或调整入口策略。
常见误区
- 把“推送成功”当成“已被收录”。
- 在 sitemap 里混入重定向地址和错误页。
- 用入口页之间互相链接来充当外链——同 IP、同模板的站群互链，权重基本被打折。
- 只提交站点首页，不提交具体入口页，导致蜘蛛停在门口就离开。
- 换了域名或改了 URL 结构后，忘了同步更新 sitemap 和已有外链。
蜘蛛池解决的是“被发现的概率”，不是“被收录的保证”。三条路径都做完，也只是把机会提上去。
每周自查一次就够了
把“已知 URL 列表”和“日志里真实被抓取的 URL 列表”对一下，差距在哪，问题就在哪。如果已知很多、抓取很少，多半是发现路径或站点整体信任度的问题；如果抓取得挺多、收录很少，那就要回到内容质量和页面本身去找原因，而不是继续加入口页数量。