标簽：容量規划

蜘蛛池的容量規划：入口頁、域名與抓取量之間怎么配比

入口頁不是越多越好。本文從域名數量、頁面可抓取性和抓取量三個變量出發，讲清蜘蛛池規模该按什么顺序估、什么时候该加頁面、什么时候该停下来先優化，並列出堆量式扩容常见的几個坑。