為什么要在意入口頁之間的连法
蜘蛛池里通常不是一個頁面單打獨斗，而是一批入口頁。蜘蛛顺着連結爬，連結怎么连，决定了它從一個入口能走多遠、多久回訪一次。连法没设計好，常见的结果是：蜘蛛總在少數几個頁面上打轉，另一批頁面長期没人碰。
三種常见的拓扑结构
扁平互鏈
所有入口頁两两互鏈，或者都指向一個總列表頁。特点是路径短，蜘蛛從任意一頁出發都容易摸到別的頁。代價是單頁出鏈數量容易失控，一頁挂几十上百個連結时，蜘蛛對每條連結分到的注意力都被摊薄。
树状分层
顶层放少量索引頁，中层放分類頁，底层放具体入口頁。结构清晰，出鏈可控，蜘蛛能按层次往下走。問题在于深度：层級太深，底层頁可能几周都轮不到一次；中間层某一环断了，下面整片都進不来。
鏈轮與环形
頁面首尾相连成环，或者小范围互相連結成轮。它能让蜘蛛在环内反复经過。但环内内容如果高度相似，重复度會很明顯，环外的頁面則容易被孤立。
几種结构的關键差异
- 路径長度：扁平最短，树状取决于层數，鏈轮居中但不保證走出去。
- 權重分散：出鏈越多，單條連結能分到的传递越少。
- 维護成本：扁平改一處影响全局，树状局部出错只影响一支。
- 故障影响面：树状的中間层是單点，环形的断点會让整圈失效。
實操上怎么定
- 先數清楚入口頁的總量，几十個和几千個的连法完全不同。
- 控制單頁連結數量，頁脚導航加正文内鏈，尽量压在合理的两位數以内。
- 给每個入口頁设計至少两條到達路径，避免只靠單一上游。
- 层級尽量压在三层以内，超過三层就考虑加横向连接。
- 内容相近的頁面不要互鏈成密網，容易放大重复信号。
几個常见誤区
- 把連結全堆在一個列表頁上，以為連結越多蜘蛛来得越勤。
- 用同一套模板生成几千個頁面互鏈，模板痕迹和内容重复一起出現。
- 环形结构里頁面内容几乎一样，只是換了個标题。
- 只盯入口頁本身，忘了看蜘蛛日誌里實际走到了哪一层。
拓扑只是给蜘蛛提供可走的路，走不走、走多深，還取决于頁面本身是否值得讀。
上线後看什么
日誌里重点看两件事：單頁被訪問的频率分布是否均匀，以及蜘蛛在池内停留的层數。如果九成訪問都落在同一小批頁面上，說明连接方式偏了，或者那几頁對蜘蛛确實更有吸引力。另外留意新加入的入口頁多久能被第一次訪問，這個時間比總抓取量更能說明鏈路是否通畅。
结构調整不必一次性推倒重来，可以先改一小块，观察一两周日誌再决定是否铺開。