标簽：站点規模

站点規模變大之後收錄變差：先分清抓取跟不上還是质量被稀释

小站点几乎發一篇收一篇，規模上去之後收錄率反而下降。本文把原因拆成四层：新增 URL 速度是否超過抓取速度、頁面入口是否變深變少、批量生成的頁面是否稀释了整体质量、重复與近重复是否變多，並给出先收敛 URL、再理顺入口的處理顺序。