很多站点在几乎每一页都挂着页脚导航、侧栏“热门文章”“最近更新”“相关标签”。从链接数量上看，这些模板位置往往远超正文里的内链。对蜘蛛来说，它们既是发现 URL 的常见入口，也可能是抓取清单里最重复的那一部分。
模板链接是蜘蛛最容易走到的位置
蜘蛛进入一个页面，最先解析的是整份 HTML。正文里的链接再多，也要先经过模板部分。页脚和侧栏出现在站内绝大多数页面上，所以它们其实是站点里被暴露次数最多的链接区域。这也是为什么有些页面明明在正文里没什么入链，却仍然能被蜘蛛看到——它可能是从某页页脚进去的。
全站一致会带来两个副作用
同一个 URL 被反复发现
如果每页都链向同一批二十篇文章，那么蜘蛛抓一百个页面，就会一百次看到这二十个地址。它通常不会每次重新抓取，但抓取队列里持续出现重复入口，会占掉一部分本可以分配给其他页面的位置。日志里表现得很直观：某些 URL 的抓取次数远高于它的内容更新频率。
新内容的入口被“平均”掉
当大量链接指向同样的旧页面时，新发布的页面如果只能靠“最近更新”这类小模块获得入口，得到的机会就相当有限。等它从模块里被挤出去，下一次被发现的时间又会拉长。这不是说模板链接会“伤害”页面，而是它的入口作用是有限的、会被分摊的。
哪些模板链接值得保留
- 主导航：层级清晰、数量可控，是站点结构的主干。
- 面包屑：指向上一级和栏目页，帮助蜘蛛理解目录关系。
- 确实变化的列表：例如按周更新的专题入口，内容真在变，才有持续发现的意义。
- 正文中的上下文链接：出现在相关段落里，指向具体的深层页，这类入口通常比侧栏更精准。
反过来看，长期不变的“热门文章”、堆了几十行的页脚、动辄上百个词的标签云，价值就需要重新评估。它们未必是错的，但值得问一句：这条链接在每一页都出现，是因为访问者需要，还是只是因为模板里空着位置。
收敛模板链接的几个做法
- 控制数量：页脚只保留必要的栏目、帮助页和服务页，超过两三行的链接列表重新过一遍。
- 让“热门”真的会变：按时间窗口轮换，或者按栏目分别展示，别让它固化成一批永久入口。
- 关键 URL 放进正文：需要被稳定抓取的页面，尽量在内容区有自然链接，而不是仅靠侧栏模块。
- 用日志核对：统计模板链接带来的抓取占比。若一批 URL 的抓取次数明显高于其更新节奏，说明重复入口偏多。
- 处理标签页与归档页：这类页面容易批量生成，可限制展开数量，或让低价值的组合页不进入抓取重点。
它和 Sitemap、正文内链并不冲突
三者承担的角色不同：Sitemap 负责把完整清单讲清楚，正文内链负责给重要页面足够的入口，模板链接负责让整站保持连通。真正的麻烦来自把模板链接当成“顺手多放点”的位置——它看起来成本很低，实际占用的是全站每一页的入口资源。
所以判断标准可以很简单：这条链接会在每一页出现，是结构需要，还是模板惯性。前者保留，后者收敛。