站点的标簽頁、专题頁、作者頁，往往是把同一批内容換個顺序再列一遍。它們對用戶有導航價值，對搜尋索引却可能是一批高度相似的结果。当這些聚合頁和分類頁大面积重叠时，收錄數量會涨，但真正能带来訪問的入口並不會變多，抓取预算也被分散了。
先確認重叠發生在哪一层
不要一上来就删頁面。先抽样十几组頁面，把重叠分成三類：完全重复、部分重叠、獨立價值。区分的标准很简單：把两個頁面的正文放在一起對比，如果去掉共有的标题列表之後，聚合頁剩下的内容不足一两句，基本就属于重复。
- 完全重复：聚合頁只列出标题和摘要，没有自己的導语或說明，和分類頁几乎一致。
- 部分重叠：聚合頁有自己的篩選說明、排序逻辑或推荐理由，但主体條目仍然和分類頁重合。
- 獨立價值：聚合頁解决了分類頁解决不了的問题，比如跨品類的横向對比、按時間整理的专题。
只有前两類才需要考虑收敛。第三類该保留就保留，必要时還應该把它做得更完整，而不是顺手砍掉。
核對顺序
- 确定主入口。同一個内容集合通常只保留一個稳定入口，其余作為辅助。先把這個判断寫下来，後面的操作都以它為准。
- 检查規范标簽。聚合頁是指向自己，還是指向分類頁，要和你的判断一致。最怕的是两個頁面互相声明規范，等于什么都没说。
- 检查内鏈。導航、面包屑、正文推荐里是否同时抛出多個等價入口。入口越多，分散得越厉害。
- 检查 sitemap。聚合頁是否被批量提交，提交量是否和它的實际價值匹配。把全部标簽頁都塞進去，往往只會增加抓取压力。
- 决定處理方式：合並、加 noindex，還是保留但减少内鏈入口。
几種常见的處理方式
合並
如果标簽頁和分類頁覆盖的内容基本一致，可以把标簽頁的說明文字並入分類頁，或者把分類頁做成带篩選的视图，让 URL 狀態可控。合並之後记得處理舊的跳轉關系，別让舊地址直接返回 404。
noindex 但不屏蔽抓取
對没有獨立價值的聚合頁，可以在頁面头部加 noindex，同时保留抓取權限。屏蔽抓取會導致頁面上的連結無法被發現，反而影响下层内容的抓取與更新。两者要分開看：不允许抓取解决不了重复收錄，noindex 才是表達不收錄意图的方式。
保留但收口
有獨立價值的聚合頁可以留下，但要控制數量，並且避免在同一层級反复互鏈。让它成為一條支线，而不是和主入口並列的第二條主线。
容易忽略的细节
- 标簽的字号、空标簽、只有一個條目的标簽頁，往往是最先该處理的一批。
- 篩選、排序參數如果會生成新 URL，即使内容相同也要考虑是否允许被索引。
- 移動版和桌面版是否用了同一個地址，如果不同，收敛規則要在两邊同时生效。
收敛後的观察点
- 分類頁和詳情頁的抓取频次是否上升。
- 被 noindex 的地址是否逐步從索引中消失，這個過程通常需要一段時間，不必急着反复提交。
- 站内搜尋、翻頁、排序等入口是否又制造出新的等價 URL。
收敛的目标不是让收錄數字好看，而是让搜尋引擎把抓取预算用在真正有区別的頁面上。數字暂时下降，不代表站点變差，要看有效入口的抓取和展現是否改善。
最後提醒一句：聚合頁的問题常常是周期性的。只要站点還在新增内容，新的标簽、新的篩選就會不断生成新 URL。把上面的核對顺序固化成流程，比一次性清理更省事，也更容易在下次發現問题时快速定位。