常
蜘蛛池入口頁寫了 noindex,搜尋蜘蛛還會跟進里面的連結吗?
很多蜘蛛池入口頁會用 meta robots 的 noindex 把自身挡在索引之外,于是就有了這個疑問:頁面不收錄了,里面的連結還會不會被跟進?本文区分 noindex 與 nofollow 的作用范围,說明抓取與索引的關系、不同寫法對連結發現的影响,以及哪些入口頁适合屏蔽自身。
阅讀全文 →共找到 1 篇與“連結跟進”相關的文章。
很多蜘蛛池入口頁會用 meta robots 的 noindex 把自身挡在索引之外,于是就有了這個疑問:頁面不收錄了,里面的連結還會不會被跟進?本文区分 noindex 與 nofollow 的作用范围,說明抓取與索引的關系、不同寫法對連結發現的影响,以及哪些入口頁适合屏蔽自身。
阅讀全文 →