在蜘蛛池和站外入口頁的运营里，nofollow 是一個经常被誤用的属性。有人為了防止權重外流，给入口頁里所有連結都加上 rel=nofollow；也有人听说“加了 nofollow 蜘蛛就不爬了”，于是刻意加上。這两種理解都不太准确，尤其在“URL 發現”這個环节上，容易把结果归错因。
nofollow 現在的含义：提示，而不是禁令
早期 nofollow 确實接近一條指令，搜尋引擎會直接忽略带该属性的連結。但近几年主流引擎陆續調整了處理方式，把它降級為一種“提示”。這意味着蜘蛛在看到 nofollow 連結时，仍然可能决定去抓取目标 URL，只是不再把它当作權重传递的依據。
不同引擎的處理差异
- Google：明确把 nofollow 作為提示使用，用于抓取和索引阶段的參考。連結仍有可能被抓取，只是不參與排名信号传递。
- Bing：同样倾向于把 nofollow 当提示處理，抓取行為可能發生，但優先級和频率會受影响。
- 其他引擎：處理方式不统一，部分仍把 nofollow 当作較强的忽略信号。
關键点：nofollow 影响的主要是權重與信任的传递，而不是“這個 URL 永遠不會被蜘蛛看到”。
那為什么很多入口頁加了 nofollow 後，目标 URL 确實没被爬？
原因往往不在 nofollow 本身，而在同时存在的其他因素：
- 入口頁本身的抓取频率就低，蜘蛛本来就不常来，nofollow 只是让情况更差。
- 頁面上的連結數量過多，nofollow 連結在抓取排队中被放到更靠後。
- 連結位置集中在頁脚、侧栏等低關注区域，發現概率天然偏低。
- 目标 URL 有歷史問题，比如長期返回 5xx、内容重复，抓取配額被压缩。
- 入口頁還叠加了 robots.txt 限制、canonical 指向別處、noindex 等因素。
換句话说，nofollow 常常只是“压垮骆驼的最後一根稻草”，而不是唯一原因。把没被抓全部归咎于 nofollow，容易導致後續調整方向跑偏。
蜘蛛池入口頁到底该不该用 nofollow
判断标准很简單：這個連結存在的目的是什么。
- 如果入口頁的核心目的就是让蜘蛛發現目标 URL，不要加 nofollow。這會削弱發現概率，在入口頁權重本就不高时更明顯。
- 如果頁面里有真實用戶會点击、但你不想传递權重的少量外鏈，可以單獨给這部分連結加 nofollow，把要推廣的目标 URL 保留為普通連結。
- 不要為了“看起来自然”而随机混用属性，混乱的連結标记反而让頁面更可疑，也對排查問题不利。
怎么判断 nofollow 連結有没有被爬
最直接的办法還是看服務器日誌，而不是凭感觉猜测。
- 篩選搜尋引擎 UA 的請求记錄，排除普通用戶和其他爬虫。
- 確認目标 URL 是否出現過對應来源 IP 段的訪問记錄。
- 如果條件允许，做對照測試：一组連結加 nofollow，一组不加，观察一段時間内的抓取覆盖差异。
- 注意观察周期。單次日誌只能反映当下，不能直接下结论。
几個常见誤区
- 把 nofollow 当成禁止抓取：禁止抓取要用 robots.txt；noindex 管的是索引，不是抓取。三者职责不同。
- 以為加了 nofollow 就完全不會被發現：多數情况下仍可能被抓，只是概率和频率下降。
- 把 nofollow 当成收錄開關：它既不能保證收錄，也不能保證不收錄。
總结一下：nofollow 更像是一個“降低優先級”的建议，而不是一道封鎖线。做蜘蛛池和入口頁运营时，先想清楚連結的目的是發現還是防權重外流，再决定用不用這個属性。如果目的是让蜘蛛發現目标 URL，把它去掉，同时把入口頁的可抓取性、連結位置和更新节奏一起做好，比纠结一個属性更有效。