很多做入口页的人会问：一个页面打开只有几十上百个外链，几乎没有正文，搜索蜘蛛会不会觉得这页没价值，从此降低抓取频率。这个问题没有一句话的答案，但可以从抓取机制上拆开看。
搜索蜘蛛怎么决定要不要继续抓这个页面
抓取一个页面，大致要做三件事：下载 HTML、解析出链接、把链接放进待抓取队列。这三步里，页面有没有正文，影响的不是能不能发现链接，而是这个页面在抓取优先级里排第几。
搜索蜘蛛的资源是有限的，尤其是中小站点，每天能分到的抓取次数就那么多。当它发现某个目录下大量页面都是同一副样子——标题相似、正文空、只有一堆外链——通常会减少对这些 URL 的抓取频次，把额度留给内容更明确的页面。这不等于惩罚，更像是一种效率选择。
只有链接的入口页，常见的几种表现
- 第一次抓取正常，之后再次抓取的间隔越来越长；
- 日志里入口页状态码是 200，但整体访问次数很少；
- 新加的目标 URL 迟迟没有出现在抓取日志里；
- 同一批入口页里，只有少数几个被反复抓。
如果你观察到这些现象，先别急着换域名或换程序，先看页面本身是不是太空。
给入口页补一点最低限度的上下文
目的不是把它做成内容站，而是让页面在机器眼里像一个正常页面。可操作的做法：
- 加一个明确的 h1，写清这个列表是做什么的，不要用首页、导航这类泛词；
- 列表前后各加一小段说明，一到三句话，说清这批链接的共同主题；
- 给每个链接配上有意义的锚文本，避免全是点击这里；
- 控制单页链接数量，几十条以内比几百条更稳，超出就分页；
- 保留一份可访问的面包屑或返回上级的链接，不要做成孤岛；
- 页面显示的更新时间要真实，不要每次抓取都变。
从日志里判断抓取意愿有没有下降
不需要复杂工具，看几个指标就够了：
- 抓取频次：同一入口页一周被访问的次数是上升还是下降；
- 新链接首次被抓的延迟：从加入列表到日志出现抓取，间隔是几天；
- 抓取深度：蜘蛛是只抓入口页，还是继续抓了里面的目标 URL；
- 状态码分布：304、200、5xx 的比例，5xx 变多通常意味着服务器先出了问题。
如果频次下降但状态码正常，多半是页面结构或内容太单薄导致的，可以先把单页链接数量减半，观察一到两周。
不建议的做法
为了喂饱蜘蛛而无限堆链接、堆关键词、堆隐藏文本，短期可能看到抓取变多，长期通常是入口页被整体降频，连原本能抓的目标 URL 也一起受影响。
另外，入口页毕竟是入口，真正决定目标 URL 能否被收录的，还是目标页面自身的可访问性、内容质量和站点整体结构。入口页能帮的是被发现，后面的路要靠目标页面自己走。
小结
只有链接没有正文的入口页不是不能用，而是更容易被排在抓取队列的后面。给它一点上下文、控制链接数量、保持服务器稳定，通常比频繁更换入口页更有效。观察周期建议以两周为单位，别根据一两天日志就下结论。