有些地址在索引里能查到,站内却没有任何链接指向它。这类页面通常叫孤岛页面,也叫孤儿页面。它能被收录,多半是靠 sitemap、外链,或者历史上的内链残留。等这些路径消失以后,抓取和更新就会慢慢停下来。下面按先确认、再判断、后补链的顺序来说。
先确认:它是不是真的没有入口
别急着补链,先花几分钟把发现路径核一遍。很多页面并不是孤岛,只是入口藏得比较深。
- 站内导航和栏目页:逐级点开,看能不能走到这个地址。
- 相关推荐、上一篇/下一篇、标签页等模块:这些位置经常才是实际入口。
- 站内搜索:如果搜品牌词或标题能出来,说明搜索页在提供入口,但这种入口不稳定。
- sitemap 和外链:只能算辅助路径,不能替代内容页之间的链接。
- 抓取日志:看最近的抓取来自哪个地址,能直接判断爬虫是从哪儿发现它的。
如果只有一个 sitemap 在指向它,本质上还是孤岛。
孤岛页面常见的两种来源
链接被误删
改版、栏目调整、内容合并的时候,正文里的链接被顺手删掉,页面本身还在。这类页面内容往往不差,只是失去了入口。
批量生成的地址
筛选结果、标签组合、旧版本页面留下的地址。这类页面彼此高度相似,本身价值有限,补链反而会把重复内容铺开。
再判断:这个页面值不值得留
孤岛状态本身不是问题,问题是没入口和内容差经常同时出现。可以先按三档处理:
- 值得保留:有明确搜索需求、有转化、有独立信息增量的页面,补内链。
- 可以合并:内容和另一篇高度重合,把有用的部分并过去,旧地址做 301。
- 应当清理:过时的活动页、无意义的参数页,用 410 或 301 收口。
判断信息增量时,不要只看字数,要看它是否回答了别的页面没回答的问题。
补内链的顺序
补链不是到处塞链接,而是从最相关的地方开始。
- 同一主题的正文里加自然链接,锚文本用描述性文字,不要用点击这里这类写法。
- 上级栏目页或目录页,把它加进列表,前提是它确实属于这个栏目。
- 相关推荐模块,按主题关联度排,不要全站随机推荐。
- sitemap 作为兜底,最后确认它有没有被收录进去。
不建议用页脚链接堆、隐藏链接、互换链接来补入口。这类做法对索引没有帮助,还可能带来额外风险。
处理之后的核对方式
补链之后不需要每天查。比较稳妥的做法是:
- 过一两周看一次抓取日志,确认爬虫确实从新入口走到了这个地址。
- 检查索引状态是已编入索引,还是已发现但未编入索引,后者说明还需要更多信号。
- 如果页面属于合并或清理那一档,重点看旧地址是否正确返回 301 或 410,而不是纠结它还出现在索引里多久。
孤岛页面往往不是技术问题,而是内容结构调整留下的尾巴。先想清楚这个页面还要不要,再决定补链还是收口,比单纯加链接更有用。