先弄清“連結密度”指什么
連結密度，简單说就是入口頁上出口連結數量與頁面内容量之間的比例關系。蜘蛛池的入口頁通常承担“中轉”角色，頁面本身信息不多，主要靠連結把蜘蛛引向目标 URL。連結密度越高，單個連結能分到的關注就越少。
抓取端處理頁面时，會把新發現的 URL 放進待抓队列。队列的處理能力有限，同一時間能抓多少頁面，受站点整体抓取频次约束。連結堆得太多，结果往往不是“抓得更多”，而是每條連結都排在後面。
連結堆太多會怎样
- 抓取机會被摊薄：同样一次来訪，蜘蛛能顺着走的路径有限，連結越多，命中你真正想推的那條的几率越低。
- 噪声占比上升：導航、頁脚、推荐位、統計脚本生成的連結混在一起，有效路径容易被淹没。
- 頁面结构變差：纯連結列表容易触發“低质聚合頁”的判断，長期看對站点没有帮助。
- 维護成本增加：連結越多，失效、重复、跳轉鏈過長的問题越难排查。
一個入口頁放多少條比較合适
没有统一數字，但可以按经驗区間来把握。這里说的是正文区域内真正指向目标站或下一层頁面的連結，通常不算導航和頁脚。
- 几十條以内：结构清晰，蜘蛛基本能走完，适合多數小型入口頁。
- 一百到两百條：已经属于列表頁形態，需要頁面有明确分類和分頁，否則尾部連結容易長期不被抓。
- 上千條：只有内容质量高、更新频繁、域名整体抓取频次高的站点才撑得住，普通入口頁不建议。
判断标准不是“蜘蛛能看见多少連結”，而是“蜘蛛愿不愿意顺着這些連結繼續走”。數量只是表象，路径清晰度才是關键。
影响實际容量的几個變量
- 响應速度：頁面返回慢、超时多，蜘蛛會降低来訪频次，可承载的連結數自然缩水。
- 域名整体状况：抓取频次是站点級別的，不只由入口頁自己决定。
- 連結相關性：同一類別、同一主题的連結放在一起，比杂乱堆砌更容易被顺着抓取。
- 渲染方式：如果連結靠脚本生成，抓取端看到的可能遠少于你在浏览器里看到的。
調整时的做法
- 先记錄目前頁面的連結數量與日誌中的實际抓取量，建立對照。
- 分批增删，一次改動的幅度不要太大，方便判断是哪次調整带来了變化。
- 把核心目标連結放在正文靠上的位置，减少需要多跳才能到達的层級。
- 清理重复連結（带不同參數的同一地址）和已经失效的連結。
- 持續观察訪問日誌里目标 URL 的出現频率，而不是只看入口頁被訪問的次數。
几個常见誤区
- 以為連結越多蜘蛛来得越勤——来訪次數和抓取頁面數是两回事。
- 只數正文連結，忽略模板里自動生成的導航與相關推荐。
- 把入口頁做成“萬能目錄”，什么連結都往上放，结果重点被冲淡。
- 改動後不看日誌，凭感觉判断有没有效果。
小结
連結密度本质上是抓取资源的分配問题。入口頁的連結數量應当服務于“让蜘蛛顺利走到目标 URL”這一目标，而不是追求表面的連結規模。控制數量、理清层級、保持頁面可用，比一味堆連結更實际。需要說明的是，蜘蛛来訪、連結被顺带抓取，並不等于内容會被收錄，二者之間没有必然關系，稳扎稳打地優化抓取路径才是更可靠的方向。