标签：数据基线

蜘蛛池的效果观察：分层记录数据，别被单日波动带偏

蜘蛛池上线后只看抓取量容易得出错误结论。本文建议先建立投放前的基线，再按入口页层、爬虫层、目标页层、成本层分别记录数据，并给出日常巡检节奏与常见误判，帮助判断这套东西到底有没有在正常工作，以及什么时候该停下来排查。