先说一个容易被混淆的前提
在蜘蛛池入口页里，发现（Discovery）和权重传递（Signal）是两件分开的事。发现指的是搜索蜘蛛顺着链接找到那个 URL 并把它放进待抓取队列；权重传递指的是这条链接算不算一次推荐。rel="nofollow" 从设计之初针对的都是后面这一层，它并不是一个「禁止蜘蛛访问」的开关。
所以入口页里的目标 URL 加了 nofollow，通常不会让蜘蛛完全看不见它，但很可能让这条链接在权重计算上打折扣。这两件事被混为一谈，是入口页最常见的误解。
主流搜索引擎对 nofollow 的实际态度
Google 从 2019 年起把 nofollow 从「指令」降级为「提示（hint）」，同时引入了 sponsored 和 ugc 两个属性。官方说明里提到，加了 nofollow 的链接仍然可能被抓取，用于发现新 URL。换句话说，发现大概率还在，权重传递不保证。
Bing
Bing 同样把 nofollow 视为提示，会结合链接上下文和页面整体情况判断，仍然可能爬取该链接，只是不把它当作推荐信号。
百度
百度对 nofollow 的公开说明一直比较模糊，历史上更倾向于把它理解为「不传递权重」。但爬虫是否访问、多久访问一次，还要看页面质量、站点整体表现和抓取配额。把它当成「蜘蛛禁止通行」的标识来用，往往会落空。
把 nofollow 当作屏蔽蜘蛛的工具，是蜘蛛池入口页里代价最高的一种误用。
哪些情况下 nofollow 确实会削弱 URL 发现
- 页面级 nofollow：在 meta robots 里写 nofollow，作用在整个页面上，页面上所有链接的跟随提示都被削弱，影响远大于单条链接。
- 链接位置本来就差：比如全部堆在页脚、重复导航或大段无关文本里，蜘蛛原本就倾向于跳过，再加 nofollow，被放弃的概率明显上升。
- 入口页整体抓取配额偏低：配额本来就少的时候，蜘蛛只会挑一部分链接抓，nofollow 会让它更早出局。
- 链接由 JS 渲染：渲染本身就存在不确定性，再叠加 nofollow，等于双重削弱。
入口页里几种常见写法的区别
- 单条链接写 rel="nofollow"：提示不传递权重，但仍可能被发现。
- 写 rel="sponsored"：用于付费或广告性质的链接，同属提示类。
- 写 rel="ugc"：用于用户生成内容里的链接，比如评论区。
- 整页 meta robots 写 nofollow：影响面最大，入口页一般不建议这么用。
注意这几个属性都不是「抓取开关」。真正想让某个 URL 不被抓，工具是 robots.txt 或页面级 noindex，而且这两个的适用场景也完全不同。
如果目标是让蜘蛛发现，该怎么处理
- 入口页的核心任务是把蜘蛛引到目标 URL 上，所以希望被发现的链接不要统一加 nofollow，至少保留一部分普通链接。
- 只是不想传递权重，可以局部加 nofollow，但要接受「权重信号弱、发现仍然可能发生」这个结果。
- 链接位置尽量分散，不要全部集中在页脚或同一段重复文本里，蜘蛛覆盖面会更完整。
- 入口页本身要能正常打开、响应别太慢，否则 nofollow 还没起作用，蜘蛛就已经走了。
怎么验证蜘蛛到底有没有来
- 查服务器访问日志，按爬虫 UA 过滤，确认目标 URL 有没有被访问过的记录。
- 看站长平台的链接报告，nofollow 链接通常会被单独列出，可以对比「被发现的链接」和「被跟随的链接」两组数据。
- 如果只有入口页被抓、目标 URL 完全没有访问痕迹，问题多半不在 nofollow，而在抓取配额、响应速度或链接位置。
最后提醒一句：日志和工具能证明的只是「蜘蛛到访过」，它和「被收录」之间还有一段距离。发现只是第一步，收录与否还要看内容本身、站点整体表现和竞争情况，没有任何一个属性设置能保证结果。