标签：分批测试

蜘蛛池的链接投放节奏：一次放完还是分批放出

链接怎么放，往往比放多少更容易被忽略。一次性把整批入口页推出去，看起来效率高，实际会让抓取集中在短时间里发生，日志混在一起，出了问题也难定位。分批放出能让节奏可控、问题可回滚，也更容易看清每一批入口页到底发挥了多大作用。