标簽：並發請求

蜘蛛池入口頁的並發請求：同一时刻来多少只蜘蛛算正常

很多人只統計蜘蛛一天来了多少次，却忽略了同一时刻的並發數量。並發過高會让入口頁返回超时或 5xx，蜘蛛拿不到内容；並發過低又說明入口頁没有被有效發現。本文讲清影响並發的几個變量、如何從日誌判断峰值是否偏高，以及可以落地的調节手段。