分頁是列表型站点最常见的结构:文章列表、商品列表、分類目錄都會翻頁。翻頁本身没有問题,問题在于頁數會随内容增長不断變多,几十頁甚至上百頁的分頁很容易把收錄名額占满,而真正能带来搜尋流量的詳情頁反而排在後面。要不要让第二頁之後進入索引,取决于這些分頁頁對用戶和搜尋是否真的有用。
先弄清分頁頁的三種角色
- 導航路径:用戶靠它逐頁浏览,搜尋引擎靠它發現更深层的内容。
- 内容聚合:某些列表頁的标题和摘要本身能回答“某類内容有哪些”這類問题。
- 纯翻頁工具:只是把同一批内容換個顺序,本身没有獨立信息。
收錄决策其實就是在判断某一頁更接近哪一種角色。前两種可以留,第三種通常没必要占用索引名額。
判断是否放行的几個問题
- 這一頁有獨立的标题和描述吗,還是只有“第 3 頁”這样的通用文案?
- 頁面上有没有目前頁獨有的内容,比如不同的摘要、不同的排序结果?
- 搜尋用戶會不會直接搜到這一頁,而不是搜到里面的某一條詳情?
- 它是不是詳情頁的主要發現入口,去掉之後深层内容還進得来吗?
如果四個問题的答案都是否定的,這一頁更接近纯翻頁工具,收敛它一般不會损失什么。
常见處理方式的顺序
- 先保證分頁連結是标准的 a 标簽,能被正常抓取和跟随,不要只靠 JS 点击或按钮事件。
- 保留前几頁參與索引,通常一到三頁就够;更靠後的頁面可以 noindex,或把 canonical 指向归一化後的地址。
- 如果分頁實际是“加载更多”,加载的是同一批内容,考虑改成真正的翻頁地址,而不是無限滚動。
- 每一頁都放自指的 canonical,不要让所有分頁都指向第一頁。那样虽然能收敛索引,却會削弱翻頁連結的發現作用。
- 收錄策略調整後,观察一段時間再决定是否繼續收紧,避免一次性改得太狠。
几個容易踩的坑
- 對第二頁之後直接 noindex,同时又指望它承担内鏈传递作用,這两件事本身是矛盾的。noindex 頁面仍可能被抓取,但長期不利于内容發現。
- 分頁 URL 带排序、會话或時間參數,同一頁出現多個版本,收錄被稀释,排查时很难看清哪一版是主版本。
- 把分頁頁成批塞進 sitemap,尤其是几百頁那種,等于主動放大索引膨胀,還會挤占真正需要提交的地址。
- 只在 robots.txt 里屏蔽分頁,頁面仍可能通過其他連結被收錄,不如用 canonical 或 noindex 表達更明确的態度。
用什么資料来驗證决定
調整前後都值得回看两组資料:一是分頁頁自身的曝光和点击,如果長期接近于零,就是可以被收敛的信号;二是深层詳情頁的抓取與收錄數量有没有同步下滑,如果下滑明顯,說明分頁承担了發現入口的角色,需要保留至少前几頁。两组資料一起看,比單看收錄總量更可靠。
分頁收錄没有统一答案,它和站点的内容体量、更新频率、詳情頁的可發現性都有關系。與其一次設定完就不管,不如把它当成一個定期回看的開關:内容規模變了,策略也跟着調整。