网
robots.txt 屏蔽与 noindex:想移除收录时该先用哪一个
robots.txt 管的是能不能抓,noindex 管的是抓到之后收不收。两者顺序用反,页面常常会以无摘要的形式长期留在索引里,而且因为抓不到,排查也变得困难。本文梳理两者的作用位置、常见的误用组合,以及移除已收录页面时可以按顺序做的几步。
阅读全文 →共找到 2 篇与“索引移除”相关的文章。
robots.txt 管的是能不能抓,noindex 管的是抓到之后收不收。两者顺序用反,页面常常会以无摘要的形式长期留在索引里,而且因为抓不到,排查也变得困难。本文梳理两者的作用位置、常见的误用组合,以及移除已收录页面时可以按顺序做的几步。
阅读全文 →收录不是永久状态。页面从索引里消失,可能是正常维护,也可能是配置失误。本文梳理常见的移除情形、容易被误判的“掉页”,并给出一套从返回码到 canonical 的自查顺序,以及确认误删后的恢复做法。
阅读全文 →