網
被 robots.txt 屏蔽的頁面還留在搜尋结果里:屏蔽與移除的核對顺序
在 robots.txt 里 Disallow 之後,URL 仍可能出現在搜尋结果里,這不是屏蔽没生效,而是抓取许可和索引狀態本来就分開。文章說明屏蔽、noindex、404/410 三種處理方式的差別,並给出一份從狀態碼到規則清理的核對顺序,避免規則打架導致舊索引長期清不掉。
阅讀全文 →共找到 1 篇與“頁面移除”相關的文章。
在 robots.txt 里 Disallow 之後,URL 仍可能出現在搜尋结果里,這不是屏蔽没生效,而是抓取许可和索引狀態本来就分開。文章說明屏蔽、noindex、404/410 三種處理方式的差別,並给出一份從狀態碼到規則清理的核對顺序,避免規則打架導致舊索引長期清不掉。
阅讀全文 →