很多人检查收錄时，习惯只看域名和目錄，却容易忽略路径末尾的一個斜杠、一個大寫字母。這些细节不會让頁面無法訪問，但會让搜尋引擎看到“多個地址指向同一内容”。
為什么路径层面也會出現重复
主机名层面的規范化（http/https、www）常被讨论，路径层面同样有類似問题。服務器和浏览器對路径的處理並不總是一致，尤其是大小寫和預設文件名。
- 大小寫：/About 與 /about 在某些服務器上返回同一頁面，在另一些服務器上則是两個不同资源。
- 结尾斜杠：/category 與 /category/ 可能返回相同内容，也可能其中一個發生 301。
- 預設文件名：/index.html、/default.html 與目錄根地址 / 经常指向同一份内容。
- 多余路径：/a//b、/a/./b 等寫法在部分环境下也能訪問。
這些地址如果都被蜘蛛發現，就可能被当作多個 URL 分別抓取。即使最终只保留一個版本，中間的抓取和判断也會消耗资源。
统一路径規范的基本做法
目标很简單：让每個頁面只有一個規范地址，其他變体都用明确信号指向它。
- 先定規則：例如路径一律小寫、目錄地址统一带结尾斜杠、頁面地址统一不带 .html（或相反），規則一旦确定就全站执行。
- 用 301 重定向：把非規范地址永久指向規范地址。不要用 302 或 JS 跳轉代替。
- 設定 canonical：如果重定向不方便，至少用 rel=canonical 指明首選地址。
- 统一内鏈：站内連結、導航、面包屑都直接使用規范地址，不要一會儿带斜杠一會儿不带。
- 站点地图只放規范地址：sitemap 里出現變体，等于主動把重复 URL 提交给蜘蛛。
- 检查静態资源與接口：CSS、JS、图片路径也可能有大小寫差异，虽然它們通常不參與頁面收錄，但會影响抓取和渲染。
抓取和收錄的区別要分清
完成重定向和 canonical 設定後，並不等于舊地址立刻從索引里消失。蜘蛛需要重新抓取、看到 301、传递信号，再更新索引。這個過程可能需要數天到數周，取决于頁面重要性和抓取频率。
規范化解决的是“让搜尋引擎知道哪個地址是首選”，不是“让變体地址马上消失”。
所以短期内看到多個地址仍被索引，属于正常現象。重点检查的是：規范地址是否能稳定訪問、重定向是否生效、canonical 是否與規范地址一致。
几個容易忽略的细节
- 结尾斜杠的 301 如果指向错誤，比如 /a/ 跳到 /b，會把原本正常的頁面带偏。
- 大小寫混用常见于手動輸入的内鏈和舊版 CMS 生成的連結，需要定期掃描。
- 带預設文件名的連結可能来自舊模板或外部引用，可保留 301，但新内鏈不要再产生。
- URL 參數與路径變体是两回事：參數問题需要另一套處理思路，不要混在一起。
- 如果站点使用 CDN 或反向代理，確認重定向規則在邊缘节点也生效。
一個简單的检查顺序
- 随机抽一批頁面，用規范地址和常见變体分別訪問，记錄狀態碼。
- 看變体是否 301 到規范地址，還是 200 直接返回。
- 检查頁面源碼里的 canonical 是否指向規范地址。
- 在站点地图和主要内鏈中搜尋變体路径。
- 观察一段時間内的抓取日誌，看變体地址的訪問是否减少。
路径規范化不是一次性工作，新頁面、新模板、新运营活動都可能带出新的變体。把它当成發布流程里的一個检查項，比事後补救更省力。