有些页面内容做得不错，但在站内几乎找不到入口，只能靠 sitemap 或外链被蜘蛛发现。这类页面就是常说的“孤岛页面”。蜘蛛在站内爬行时，主要靠页面上的可点击链接继续发现新 URL。如果内链结构没做好，蜘蛛池或主动推送能帮上一点忙，但没法替代站内入口。
孤岛页面为什么会出现
常见原因有几个：新内容发布后没有挂到栏目页或相关推荐；旧内容改版时链接被删；标签、归档只展示部分文章；分页或筛选地址吃掉了入口；开发环境或测试路径留下了可访问页面。对蜘蛛来说，没有站内链接指向，这个 URL 的发现路径就断了。
先找出没有站内入链的页面
可以用一份站内 URL 清单做基础，比如 Sitemap、数据库、日志中已抓取的地址，然后逐个检查是否有站内页面链接到它。手动检查适合小站，大站可以借助爬虫工具，把“只有出链没有入链”的页面筛出来。也可以模拟蜘蛛从首页出发，看哪些重要页面点不到。
- 重点看栏目页、专题页、产品页和近期更新的文章。
- 区分“真孤岛”和“入口很深”：完全无入链比点击次数多更严重。
- 注意链接是否可被蜘蛛抓取：有些入口是按钮或脚本跳转，蜘蛛可能不执行。
内链要放在有意义的位置
内链不是越多越好。正文中顺着语义插入的链接，通常比页脚、侧栏的全站链接更有参考价值。锚文本尽量自然描述目标页主题，比如“站点日志排查方法”比“点击这里”“更多”更清楚。同一篇内容里不要反复用完全相同的锚文本指向不同页面，也不要把关键词硬塞成链接。
导航、面包屑和聚合页的分工
主导航负责把重要栏目暴露出来；面包屑告诉蜘蛛当前页面在什么层级；标签页、归档页、相关推荐可以给旧内容补充入口。但聚合页本身如果只靠参数拼接，或者内容太杂，反而会分散抓取。建议让聚合页有独立价值，比如按主题整理、有摘要和筛选规则，而不是把所有 URL 都堆上去。
控制链接深度，给新内容留入口
重要页面尽量在三次点击内可达。首页、栏目页、专题页、相关文章模块都是常见入口。新内容发布后，可以从同主题旧文章、栏目列表、站内推荐位给一两个链接，不需要全站铺。每次更新顺手补内链，比一次性大规模调整更容易坚持。
一份可执行的自查清单
- Sitemap 中的每个重要 URL，是否至少有一个可点击的站内入链？
- 是否存在只有外链或 sitemap 才能到达的孤岛页面？
- 内链是否使用可抓取的 a 标签，而不是 JavaScript 跳转或表单按钮？
- 锚文本是否自然、有区分度，没有过度堆砌？
- 站内是否有失效链接或错误重定向，导致入口断掉？
- 站内搜索页、筛选页、分页是否产生大量低价值链接？
- 新内容发布后，是否能在栏目页或相关推荐中出现？
别把内链做成低质蜘蛛池
有人为了增加抓取，用蜘蛛池或大量互链制造入口。短期可能看到蜘蛛访问变多，但如果链接页面质量差、内容无关，对站点结构没有帮助，还容易让蜘蛛把抓取预算花在低价值地址上。内链首先服务用户浏览，其次才是帮助蜘蛛发现 URL。两者方向一致时，结构才稳定。
定期复查孤岛页面，发布新内容时顺手补一两个上下文内链。蜘蛛池、推送和 Sitemap 都是辅助，站内入口清楚，URL 发现才会更顺。