做蜘蛛池时，很多人为了“让搜索蜘蛛多看到几个目标 URL”，会把入口页做成一张几乎只有链接的清单页：几十上百条链接，正文可能只有一句“相关资源”。这种页面搜索蜘蛛会不会抓？抓了会不会继续往外爬？这是运营里被问得比较多的问题。
先给结论：链接能不能被发现，和页面有没有正文，是两件事；但页面有没有正文，会影响搜索蜘蛛对这个页面本身的判断，进而影响它多久来一次、愿意抓多少。
一、抓取层面：纯链接页通常还是会被解析
搜索蜘蛛拿到一个 HTML 页面后，主要工作是解析内容、抽取其中的链接、把新链接放进待抓取队列。这个过程并不要求页面必须有几百字正文。只要链接写在标准的 a 标签 href 里、没有被 nofollow 或其他指令拦住、目标 URL 又确实可以访问，链接就有机会进入队列。
也就是说，“页面没有正文”本身不会直接让链接消失。真正影响发现的，是下面这些更实际的因素。
二、质量层面：纯链接页容易被当成低价值模板页
搜索蜘蛛背后还有一套对页面质量的判断。一个页面如果满足下面几种情况，就容易被归到低价值那一类：
- 正文近乎为空，可读内容只有标题和链接；
- 外层结构、模板与其他入口页高度相似；
- 链接指向的站点主题杂乱、彼此无关；
- 页面长期不更新，链接也不变化。
这类页面常见的结果是：抓取频次降低、抓取配额被压缩、发现新链接的速度变慢。入口页还在，链接也还在，只是搜索蜘蛛来得少了。这不等于惩罚，但会实实在在地拖慢 URL 被发现的速度。
三、容易被误判的几种写法
下面这些做法，会让“纯链接页”的风险更高：
- 一次塞入几百条链接，且没有任何分组或说明，页面主体就是一堵链接墙；
- 正文用图片或 JS 输出，HTML 源码里只剩链接；
- 多个入口页内容完全一致，只换了标题和少量链接；
- 隐藏文字、隐藏链接，或对搜索蜘蛛返回与用户不同的内容；
- 入口页与目标站主题毫不相关，纯粹为放链接而放。
四、想保留简洁结构又不被当低质页，可以这样做
- 给入口页加一段真实可读的说明文字，讲清这一页是做什么的、链接按什么标准筛选，不必长，一两段即可。
- 把链接分组并加小标题，让页面结构不只是“一堆 a 标签”。
- 控制单页链接数量，超出后分页或拆成几个入口页，而不是无限堆叠。
- 页面之间做内容差异化，不要靠复制模板批量生成。
- 定期更新入口页，增删链接，让页面有变化；长期不动的入口页，搜索蜘蛛自然懒得回访。
- 入口页本身要能正常加载、响应稳定、返回 200，别让抓取卡在第一步。
五、怎么验证有没有效果
判断入口页是否被正常对待，看日志比看感觉准：
- 搜索蜘蛛有没有访问入口页，访问频次是上升还是下降；
- 访问之后，有没有继续去抓页面里的目标 URL；
- 目标 URL 的抓取频次有没有随入口页更新而变化；
- 入口页返回的状态码、响应时间是否稳定。
如果入口页一直被抓、目标 URL 也有抓取记录，说明这条链路是通的。如果入口页本身越来越少见，先检查内容质量和更新频率，再考虑其他因素。
需要说明的是，搜索蜘蛛是否抓取、抓取后是否收录，都由搜索引擎自行决定，任何入口页做法都只能提高被发现的概率，不能保证结果。
总结一句：纯链接页不会因为“没有正文”就让链接凭空消失，但长期以低质模板页的形态存在，会让搜索蜘蛛降低回访意愿。把入口页做得像一张真的、有人维护的资源页，比单纯堆链接更划算。