标签：蜘蛛入口页

抓取入口页怎么挑：蜘蛛进站的第一跳决定后面能走多远

蜘蛛进站后的第一批 URL 往往来自几个固定入口。入口页选得合适，抓取路径会更宽；选偏了，再补 Sitemap 和内链也事倍功半。本文梳理入口页的常见类型、挑选标准、它与抓取深度的关系，以及几种容易踩的入口设置问题。