常
蜘蛛池与URL发现：服务器返回304状态码，搜索蜘蛛会认为页面没更新吗？
本文解释搜索蜘蛛抓取时304状态码的含义及其对URL发现和抓取预算的影响，并介绍如何正确配置Last-Modified与ETag，帮助网站运营者准确判断页面更新信号。
阅读全文 →常
蜘蛛池与URL发现：返回304状态码时，搜索蜘蛛算不算真正抓取了URL？
很多站长在查看蜘蛛日志时，遇到304状态码容易一头雾水，既不像200那样成功，也不像404那样报错。本文解释搜索蜘蛛的条件请求与304状态码的关系，分析304对URL抓取和发现预算的实际影响，并给出站点运营与蜘蛛池场景下的实用建议。
阅读全文 →