标签：蜘蛛重访

蜘蛛多久重访一次：lastmod、Sitemap 与日志里的更新线索

页面更新后，蜘蛛并不会马上重访。本文从 lastmod、Sitemap、内链变化和访问日志入手，说明怎样给出可靠的更新信号、观察重访间隔，并在蜘蛛再次访问时保持服务器稳定，减少无效等待和反复抓取。