同一篇稿子，先在主站频道發一次，又在活動頁、作者頁、移動版目錄各留了一份；編輯器里图省事，直接複製粘贴。這類做法在站内並不少见，短期看不出問题，等到做收錄自查时，才發現搜尋结果的落点是那個最不该被看到的版本。
重复本身不會「被罚」，但會让人替你做選擇
搜尋引擎遇到多個内容高度相似的 URL，通常不會直接判罚站点，而是自己挑一個作為主版本展示，其余留在索引里或被折叠。問题在于，它挑的那個版本，未必是你希望用戶看到、也未必是最有轉化價值的頁面。如果挑中的是參數頁、打印頁或者没有導航的移動版，用戶進来之後很难繼續浏览。
另外，重复入口會摊薄内鏈的作用。十條内鏈分散在五個相似 URL 上，每個只拿到两條，力量不如集中在一個頁面上。
站内重复的几個常见来源
- 同一篇内容發布在多個栏目，URL 各不相同；
- PC 與移動版各用獨立域名或獨立目錄，且互相之間没有指向關系；
- 列表篩選、排序參數生成的頁面，與原始列表内容基本一致；
- 打印頁、纯文本版、分享落地頁；
- 标簽頁、聚合頁把已有文章全文輸出的场景。
先判断：這個重复值不值得處理
不是所有重复都要動。判断标准可以简單一点：
- 這些 URL 有没有各自获得外部連結或站内連結？如果只有一個入口在正常使用，其余基本没人訪問，優先級就低；
- 用戶是否可能通過搜尋结果直接落到非主版本？如果會，就需要收口；
- 该頁面是否承担轉化或關键信息展示？承担的话，主版本必须明确。
收口的几種做法
一、只留一個可訪問版本
最干净的方式是让重复 URL 返回 301 指向主版本。适合真正重复、且原地址没有獨立價值的场景，比如打印頁、废弃的移動版目錄。
二、保留多份，用 canonical 指明主版本
如果重复版本有存在理由（例如活動頁需要獨立样式），可以在這些頁面上用 canonical 指向主版本。注意两点：canonical 是建议而不是命令，頁面本身還有大量獨有内容时，搜尋引擎可能不采纳；另外，canonical 的目标頁必须是可抓取、可索引、内容确實對得上的頁面。
三、内鏈统一指向主版本
這一條常被忽略。站内連結是你能完全控制的信号。導航、面包屑、相關阅讀、专题入口，都尽量指向同一個主版本；列表頁里如果同时存在两個入口，把多余的那條去掉。連結收敛了，抓取和權重分配也會跟着收敛。
處理之後怎么確認
改動上线後，不必急着下结论。可以按這個顺序观察：
- 用站点日誌看重复 URL 的抓取频次是否下降；
- 用網址检查類工具看主版本是否被選定、重复版本的索引狀態是否變化；
- 观察搜尋结果的落点是否稳定在主版本上。
索引狀態的變化需要時間，几周内出現反复很正常，不要因為一两天没動静就频繁改回。
別把收敛做成折腾
有些站点為了「消除重复」，频繁調整 canonical、批量 301，结果把本来正常的抓取节奏打乱。重复内容更多时候是结构問题：先理清哪些 URL 真正對外使用、哪個版本该被用戶看到，再决定用哪種收敛方式，比反复试探有效得多。收錄與索引由搜尋引擎决定，我們能做的是把版本關系表達清楚，让它在做選擇时不容易選错。