站点里出現多個 URL 指向相同或高度相似的内容时，搜尋引擎需要花時間判断哪個版本更值得保留。這個過程不一定會惩罚站点，但會让收錄和權重集中變得不稳定。與其反复提交 URL，不如先理清重复内容的類型，再選擇處理手段。
先分清重复内容的三種常见情况
- 完全重复：同一套 HTML 通過不同 URL 訪問，例如带與不带 www、http 與 https、末尾斜杠與不带斜杠。
- 近似重复：正文主体相同，但标题、價格、评论數或推荐模块略有差异，常见于篩選頁和商品變体頁。
- 跨端或跨地区重复：移動版與桌面版内容基本一致，或多個地区站点共用同一套文案。
不同類型對應的處理動作不同。如果只是 URL 規范問题，優先做跳轉；如果是内容本身需要保留多個版本，則考虑 canonical；只有确實不希望某個版本出現在索引里，才用 noindex。
處理顺序：先合並，再規范，最後才排除
301 重定向：能合並的尽量合並
当舊 URL 已经不需要單獨存在，或者多個 URL 實际是同一份内容时，301 是最直接的方式。它把用戶和搜尋引擎都带到新地址，權重也會随之轉移。常见场景包括域名更換、目錄结构調整、參數頁合並到主頁面。
canonical：多個 URL 都需要訪問时使用
有些頁面必须保留多個入口，比如带跟踪參數的分享連結、打印版頁面、排序方式不同的列表頁。這时可以用 canonical 指定主版本。注意 canonical 是建议而非强制，如果两個頁面内容差异過大，搜尋引擎可能不會采纳。
noindex：确實不需要索引的頁面
内部搜尋结果頁、用戶後台、临时活動頁等，通常不需要出現在搜尋结果里。使用 noindex 可以避免它們占用抓取和索引资源。但要說明的是，noindex 頁面仍然可能被抓取，只是不會被建入索引。
不要同时用 canonical 和 noindex 指向同一個頁面。两個信号容易互相抵消，让搜尋引擎难以判断你的意图。
几個常见的誤用
- canonical 指向不相關頁面：把多個不同内容的頁面都 canonical 到首頁，通常不會按预期生效。
- 301 鏈過長：A 跳 B、B 跳 C，抓取會消耗在中間环节，最好直接跳到最终地址。
- 只改标簽不處理内鏈：站内仍然大量連結到舊 URL，會繼續产生重复入口。
- 忽略站点地图：地图里同时提交多個重复版本，會放大重复信号。
自查顺序
處理重复内容之前，可以先按這個顺序检查：
- 用抓取日誌確認搜尋引擎實际訪問了哪些 URL；
- 在索引狀態里查看這些 URL 是否被收錄、收錄的是哪個版本；
- 检查 canonical、301、noindex 标簽是否互相冲突；
- 對比重复頁面的正文、标题和主要模块，判断是否真的属于同一内容；
- 观察處理後的收錄變化，不要频繁改動标簽。
重复内容的處理没有统一答案。更稳妥的做法是：先明确哪些 URL 應该保留，再選擇跳轉、canonical 或 noindex。處理之後，结合站点地图和内鏈逐步收敛入口，让搜尋引擎更容易识別主版本。