有些页面在后台能看到，从首页一路点却点不到——没有导航入口，没有列表链接，也没有其他页面提到它。这类页面通常被称为“孤立页面”。它们的内容不一定差，但被发现的机会明显更少。想让它们进索引，第一步不是反复提交，而是搞清蜘蛛是从哪条路走到它的。
URL 被发现，靠的是几条固定通道
搜索引擎拿到一个新 URL，大致有几条路径：站内链接、sitemap 文件、外部链接，以及站长主动提交的接口。这几条通道解决的问题并不一样，也不能互相完全替代。
站内内链：最稳定的一条
蜘蛛沿着链接走是最自然的方式。一个页面只要从首页或某个经常被抓取的列表页，经过两三次点击就能到达，它被发现的机会就明显高于藏得很深的页面。内链不要求多，但要求有——哪怕只有一条从相关页面正文里指向它的链接。
Sitemap：列出 URL，但不保证被抓
把地址写进 sitemap，等于告诉搜索引擎“这里有个页面”。它解决的是“知道存在”的问题，不解决“什么时候来抓”。如果站点整体被访问的次数有限，或者 sitemap 里一次塞了几万个 URL，新加的那一条可能排很久。
外部链接：能带来新入口，但不是越多越好
其他站点指向你的链接，会让蜘蛛从站外走进站内。对完全没有内链的新页面来说，一条来自经常被访问页面的外链，有时比十条无意义的链接更有效。至于常被提到的蜘蛛池，思路就是靠大量页面互相链接、互相引导蜘蛛。实际使用中要注意：质量低的链接群本身也可能不被信任，带来的是无效访问而不是收录。把它当成唯一手段，风险大于收益。
主动提交：适合新页面和刚改动的页面
多数搜索平台提供提交接口，适合新发布或刚修改过的 URL。它加快的是“通知”这一步，仍旧不承诺一定被抓、一定被索引。提交一次即可，反复提交并不会加快进度。
为什么写进 Sitemap 的 URL 还是没动静
- 文件本身有问题：格式错误、编码不对、被 robots.txt 挡住，或其中的 URL 返回的不是 200。
- 页面没有入口：sitemap 里有它，但站内没有任何链接指向它，这类地址往往被排到后面。
- 站点整体抓取配额被大量低价值页面占用：标签页、筛选页、参数页吃掉了访问量。
- 页面内容完整度不足，被抓取后没有被保留。
用日志确认蜘蛛到底走没走到
与其反复提交，不如看服务器日志。重点看三件事：
- 蜘蛛有没有请求过这个 URL——有请求，说明至少被发现过；
- 返回的状态码是什么——200、301、404、5xx 代表的情况完全不同；
- 同一个 URL 被请求了几次、间隔多久——长期只来一次，说明入口太弱。
如果日志里完全没有这条 URL 的记录，问题在发现环节，方向应该放在内链、sitemap 和外部引导上。如果有记录但状态码异常，先修服务器配置或跳转规则。如果有正常的 200 请求却始终没进索引，那要回到页面本身去看内容质量和重复度。
先分清“没被发现”和“发现了没被抓”，再决定是该加内链还是该改页面，能省下很多无效提交。
一个可执行的顺序
- 给页面补至少一条站内正文链接，优先从同主题、被抓取频繁的页面指向它。
- 确认 URL 能正常返回 200，并且没有被 robots.txt 误挡。
- 把地址加入对应的 sitemap 分片，避免单次写入过多。
- 通过提交接口通知一次，之后不必反复提交。
- 过一周再看日志，判断卡在哪一环，再决定下一步。
孤立页面不是不能被收录，只是它需要有人主动把它接回站点结构里。把入口补齐，比反复提交要实际得多。