标簽：連結分层

蜘蛛池的連結分层：哪些 URL 值得放進池子，哪些是無效消耗

蜘蛛池的價值集中在 URL 發現，而不是無差別地喂给蜘蛛。把連結按價值和时效分层，優先處理新頁面、内鏈薄弱頁和重要分類頁，控制重复參數頁與低质分頁的投放，配合日誌观察抓取反馈，才能让池子里的入口頁真正發挥作用，减少無效抓取與资源空轉。