很多站点在几乎每一頁都挂着頁脚導航、侧栏“热门文章”“最近更新”“相關标簽”。從連結數量上看，這些模板位置往往遠超正文里的内鏈。對蜘蛛来说，它們既是發現 URL 的常见入口，也可能是抓取清單里最重复的那一部分。
模板連結是蜘蛛最容易走到的位置
蜘蛛進入一個頁面，最先解析的是整份 HTML。正文里的連結再多，也要先经過模板部分。頁脚和侧栏出現在站内绝大多數頁面上，所以它們其實是站点里被暴露次數最多的連結区域。這也是為什么有些頁面明明在正文里没什么入鏈，却仍然能被蜘蛛看到——它可能是從某頁頁脚進去的。
全站一致會带来两個副作用
同一個 URL 被反复發現
如果每頁都鏈向同一批二十篇文章，那么蜘蛛抓一百個頁面，就會一百次看到這二十個地址。它通常不會每次重新抓取，但抓取队列里持續出現重复入口，會占掉一部分本可以分配给其他頁面的位置。日誌里表現得很直观：某些 URL 的抓取次數遠高于它的内容更新频率。
新内容的入口被“平均”掉
当大量連結指向同样的舊頁面时，新發布的頁面如果只能靠“最近更新”這類小模块获得入口，得到的机會就相当有限。等它從模块里被挤出去，下一次被發現的時間又會拉長。這不是说模板連結會“伤害”頁面，而是它的入口作用是有限的、會被分摊的。
哪些模板連結值得保留
- 主導航：层級清晰、數量可控，是站点结构的主干。
- 面包屑：指向上一級和栏目頁，帮助蜘蛛理解目錄關系。
- 确實變化的列表：例如按周更新的专题入口，内容真在變，才有持續發現的意义。
- 正文中的上下文連結：出現在相關段落里，指向具体的深层頁，這類入口通常比侧栏更精准。
反過来看，長期不變的“热门文章”、堆了几十行的頁脚、動辄上百個词的标簽云，價值就需要重新评估。它們未必是错的，但值得問一句：這條連結在每一頁都出現，是因為訪問者需要，還是只是因為模板里空着位置。
收敛模板連結的几個做法
- 控制數量：頁脚只保留必要的栏目、帮助頁和服務頁，超過两三行的連結列表重新過一遍。
- 让“热门”真的會變：按時間窗口轮換，或者按栏目分別展示，別让它固化成一批永久入口。
- 關键 URL 放進正文：需要被稳定抓取的頁面，尽量在内容区有自然連結，而不是僅靠侧栏模块。
- 用日誌核對：統計模板連結带来的抓取占比。若一批 URL 的抓取次數明顯高于其更新节奏，說明重复入口偏多。
- 處理标簽頁與归档頁：這類頁面容易批量生成，可限制展開數量，或让低價值的组合頁不進入抓取重点。
它和 Sitemap、正文内鏈並不冲突
三者承担的角色不同：Sitemap 负责把完整清單讲清楚，正文内鏈负责给重要頁面足够的入口，模板連結负责让整站保持连通。真正的麻烦来自把模板連結当成“顺手多放点”的位置——它看起来成本很低，實际占用的是全站每一頁的入口资源。
所以判断标准可以很简單：這條連結會在每一頁出現，是结构需要，還是模板惯性。前者保留，後者收敛。