标簽：容量预留

抓取时段與服務器负载：蜘蛛訪問高峰的观察與容量预留

蜘蛛的抓取並不是均匀铺開的，往往集中在某些时段。本文從日誌時間分布、响應時間與错誤率入手，說明如何观察抓取高峰、判断服務器是否成為瓶颈，以及如何通過容量预留和缓存策略减少抓取中断，让 URL 發現节奏保持稳定。