站点里出现多个 URL 指向相同或高度相似的内容时，搜索引擎需要花时间判断哪个版本更值得保留。这个过程不一定会惩罚站点，但会让收录和权重集中变得不稳定。与其反复提交 URL，不如先理清重复内容的类型，再选择处理手段。
先分清重复内容的三种常见情况
- 完全重复：同一套 HTML 通过不同 URL 访问，例如带与不带 www、http 与 https、末尾斜杠与不带斜杠。
- 近似重复：正文主体相同，但标题、价格、评论数或推荐模块略有差异，常见于筛选页和商品变体页。
- 跨端或跨地区重复：移动版与桌面版内容基本一致，或多个地区站点共用同一套文案。
不同类型对应的处理动作不同。如果只是 URL 规范问题，优先做跳转；如果是内容本身需要保留多个版本，则考虑 canonical；只有确实不希望某个版本出现在索引里，才用 noindex。
处理顺序：先合并，再规范，最后才排除
301 重定向：能合并的尽量合并
当旧 URL 已经不需要单独存在，或者多个 URL 实际是同一份内容时，301 是最直接的方式。它把用户和搜索引擎都带到新地址，权重也会随之转移。常见场景包括域名更换、目录结构调整、参数页合并到主页面。
canonical：多个 URL 都需要访问时使用
有些页面必须保留多个入口，比如带跟踪参数的分享链接、打印版页面、排序方式不同的列表页。这时可以用 canonical 指定主版本。注意 canonical 是建议而非强制，如果两个页面内容差异过大，搜索引擎可能不会采纳。
noindex：确实不需要索引的页面
内部搜索结果页、用户后台、临时活动页等，通常不需要出现在搜索结果里。使用 noindex 可以避免它们占用抓取和索引资源。但要说明的是，noindex 页面仍然可能被抓取，只是不会被建入索引。
不要同时用 canonical 和 noindex 指向同一个页面。两个信号容易互相抵消，让搜索引擎难以判断你的意图。
几个常见的误用
- canonical 指向不相关页面：把多个不同内容的页面都 canonical 到首页，通常不会按预期生效。
- 301 链过长：A 跳 B、B 跳 C，抓取会消耗在中间环节，最好直接跳到最终地址。
- 只改标签不处理内链：站内仍然大量链接到旧 URL，会继续产生重复入口。
- 忽略站点地图：地图里同时提交多个重复版本，会放大重复信号。
自查顺序
处理重复内容之前，可以先按这个顺序检查：
- 用抓取日志确认搜索引擎实际访问了哪些 URL；
- 在索引状态里查看这些 URL 是否被收录、收录的是哪个版本；
- 检查 canonical、301、noindex 标签是否互相冲突；
- 对比重复页面的正文、标题和主要模块，判断是否真的属于同一内容；
- 观察处理后的收录变化，不要频繁改动标签。
重复内容的处理没有统一答案。更稳妥的做法是：先明确哪些 URL 应该保留，再选择跳转、canonical 或 noindex。处理之后，结合站点地图和内链逐步收敛入口，让搜索引擎更容易识别主版本。