搭建蜘蛛池入口頁时，很多人會卡在同一個問题上：一個入口頁上到底放多少條連結合适？放少了担心蜘蛛發現不了，放多了又怕它不抓、抓不完。這個問题没有统一數字，但可以從抓取机制和日誌反馈两個角度去判断。
連結數量影响的是抓取分配，不是收錄结果
搜尋引擎對每個站点、每個目錄大致都有一個抓取配額的概念。蜘蛛訪問一個頁面时，主要做三件事：請求頁面、解析 HTML、把新發現的 URL 放進待抓队列。連結數量越多，解析和排队的工作量越大，而配額是有限的，最终体現在目标 URL 被發現的快慢上。
需要說明的是，連結數量只影响 URL 被發現、進入队列的效率，和最终是否收錄、排名没有直接因果關系。把入口頁塞满連結，並不會換来對應比例的收錄。
為什么“越多越好”经常失效
- 單頁去重：同一個目标 URL 在一頁里重复出現多次，通常只算一次，重复反而增加頁面体积。
- 解析成本：入口頁 HTML 動辄几百 KB，蜘蛛要下载並解析更多内容，單位時間能處理的目标就更少。
- 注意力被摊薄：頁面上的連結越多，每條連結分到的關注越少，優先級判断也更模糊。
- 质量信号混乱：大量無差別外鏈容易让入口頁被判定為低质量聚合頁，反過来影响被抓频率。
几個常见誤区
- 以為連結越多目标 URL 被發現得越快。實际队列是共享的，堆量往往只是让排在後面的連結更晚被處理。
- 以為把連結藏起来（display:none、字号设成 0）也能传量。隐藏内容一旦被识別，反而拖累入口頁的信任度。
- 以為所有連結都要塞進同一個入口頁。拆成多個入口頁、分批更新，通常比單頁堆几百條更稳。
用抓取日誌判断入口頁連結是否過多
判断标准不在數字上，而在日誌里，建议按下面顺序看：
- 入口頁被抓之後，目标 URL 多久出現抓取记錄；
- 入口頁被重复抓取时，目标 URL 的抓取量是否同步增長；
- 是否長期出現“入口頁天天抓、目标頁几乎不抓”的情况；
- 單次抓取的响應体大小和响應時間是否明顯異常。
如果入口頁抓取正常但目标頁抓取長期為零，優先怀疑連結寫法（JS 渲染、iframe、需要登入才能看到）或目标頁本身返回異常，而不是繼續加連結。
有没有參考区間
早些年有過“單頁不超過 100 條連結”的粗略说法，但不同搜尋引擎、不同站点体量下差异很大，不必当硬标准。更實际的做法是：從几十條起步，观察目标頁被抓的速度，再逐步增加，找到自己站点的平衡点。入口頁數量偏少但能稳定被抓，通常比單頁堆量更有價值。
實践中的几條建议
- 單頁連結保持在可维護的范围内，宁少而稳，不要一次堆满；
- 把同一批目标拆到多個入口頁，分批更新，便于對比哪些頁面更有效；
- 保證每個目标 URL 寫法唯一，避免大小寫、參數顺序不同造成的重复；
- 入口頁保留基本可讀的正文，不要只剩一長串連結；
- 配合 sitemap 提交，連結發現和站点地图是互补關系，不是替代關系。
入口頁的價值在于让搜尋蜘蛛顺畅地發現並走到目标 URL，連結數量只是其中一环。與其纠结“放多少條”，不如把日誌看细，用真實抓取資料反過来調整入口頁结构。