有些站点的收錄問题，不是蜘蛛不来，也不是頁面质量差，而是同一件事在站内被寫了好几遍。用戶搜一個词，结果里可能同时出現两三個本站在讲同一话题的 URL；搜尋引擎只能挑一個展示，其余的即使被收錄，也很难拿到稳定曝光。這篇讲的就是這類重复内容该怎么處理。
先分清三種「重复」
- 完全重复：正文几乎一字不差，只是 URL 不同，常见于複製頁面、带參數的商品頁、測試残留頁面。
- 主体重复：正文大段相同，外围的标题、參數、落地信息不同，常见于产品變体頁、地区頁、篩選頁。
- 主题竞争：文字完全不同，但回答的是同一個搜尋意图，常见于多篇選题撞车的文章。
這三種的處理方式不一样。前两種多半要靠合並，第三種往往只能靠調整定位或再合並，硬留着只會互相分流。
重复内容本身不是惩罚，問题是「選谁」
搜尋引擎面對若干相似頁面时，會在内部挑一個作為展示版本，其余的降級處理。被降級的頁面不一定從索引里消失，但基本拿不到展示机會。所以治理的目标不是消灭重复，而是让你最想被選中的那個頁面更容易被選中。如果站内没有明确的主版本，搜尋引擎只能自己猜，猜错的时候你甚至不知道發生了什么。
自查：三步看出問题
- 用核心词在搜尋引擎里搜，看结果里出現的是哪几個本站 URL，是不是你期望的那個。
- 用 site: 语法逐個查可疑頁面，確認它們是否都還在索引里，還是已经被折叠。
- 翻日誌或覆盖率报告，看哪些相似頁面在被频繁抓取，却長期没有点击和展示。
第三步最關键。被抓取但不被展示的頁面，通常就是重复内容最集中的地方。
治理顺序：先合並，再差异化，最後收口
能合並的：301 到一個主版本
如果两個頁面回答的是同一個問题，其中一個是另一個的补充，那就把弱的一方 301 到强的一方。選主版本的依據可以看：内容更完整、外鏈更多、歷史收錄更稳定、URL 更清晰。合並後，把原頁面里有價值的内容片段补進主版本，別直接丢掉。
不能合並的：寫出各自不可替代的部分
地区頁、規格頁這類确實需要獨立存在的頁面，要保證每頁都有獨有信息——当地的门店信息、對應的規格參數、专属的办理流程。如果去掉模板部分後剩下的内容几乎一样，那它本质上還是重复頁，只是換了壳。
确定不要的：noindex 或 301，並從站点地图移除
低價值聚合頁、已经過期的活動頁、纯粹為凑數量生成的頁面，该收口就收口。注意要同步更新站点地图和站内連結，否則會出現「索引里没了、站内還在推」的矛盾狀態。
内部連結要跟着一起改
主版本确定之後，導航、面包屑、正文推荐位、相關阅讀都應该指向它，锚文本尽量统一。如果站内連結還在分散地指向多個相似頁面，搜尋引擎拿到的信号依舊是混乱的，合並的效果會打折。
几個容易做错的地方
- 只加 canonical 标簽就不管了。canonical 是建议，不是命令，連結和内容信号不一致时它可能被忽略。
- 把模板重复当正文重复。導航、頁脚、侧栏在全站重复是正常的，判断重复要看主体内容。
- 一次性大批量刪除。先看流量和收錄狀態，分批處理，每批观察一段時間再决定下一步。
重复内容治理的目标不是把頁面數量降下来，而是让每一個留在索引里的 URL 都有明确且不重复的用途。
處理完成後，別急着看隔天的结果。搜尋引擎需要重新抓取、重新评估，通常要观察几周，確認主版本是否稳定出現在结果里、被降級的頁面是否已经登出展示，再决定要不要繼續收口。