网
抓取和收录是两道关:分开看,排查顺序才清楚
抓取是爬虫把页面取回,收录是搜索引擎决定把它留在索引里,两者的判断标准并不相同。本文把这两步拆开,分别给出未被抓取、被抓取却未收录时的排查顺序,并说明蜘蛛池这类做法能影响的部分和影响不了的部分。
阅读全文 →共找到 1 篇与“索引状态报告”相关的文章。
抓取是爬虫把页面取回,收录是搜索引擎决定把它留在索引里,两者的判断标准并不相同。本文把这两步拆开,分别给出未被抓取、被抓取却未收录时的排查顺序,并说明蜘蛛池这类做法能影响的部分和影响不了的部分。
阅读全文 →