标签：服务器稳定

搜索蜘蛛抓取：抓取速率协商与 429、503 反馈的配合调整

抓取速率并非由搜索引擎单方面决定。站点可以通过 robots 中的 crawl-delay、HTTP 429/503 与 Retry-After、以及平台侧的抓取频次设置传递信号。本文梳理这些信号的生效范围与差异，并给出从访问日志判断服务器压力、按顺序调整速率的实用思路。