站点运营

站点运营:分頁自查,別让翻頁把深层内容挡在抓取路径之外

列表頁翻到第三頁之後往往就没人看了,包括蜘蛛。但深层内容恰恰藏在那里。本文從連結可抓取性、每頁條數、分頁标题、翻頁方式、sitemap 配合几個角度,整理一份分頁自查清單,帮站点运营者把翻頁這件事重新過一遍。

站点运营

站点运营:分頁自查,別让翻頁把深层内容挡在抓取路径之外

列表頁翻到第三頁之後,往往就很少有人看了——包括蜘蛛。但深层内容恰恰都藏在後面。分頁看起来只是頁面底部那個「下一頁」按钮,實际同时影响着訪客的浏览深度和蜘蛛的抓取路径。這篇整理一份分頁自查清單,适合栏目多、内容量大的站点定期過一遍。

第一步:確認翻頁連結蜘蛛能不能点到

不少站点的分頁是用脚本拼出来的:按钮是個 div,没有 href,点击之後才去請求資料。人点得動,蜘蛛看不到。检查时不用看源碼看很久,把浏览器里的脚本關掉,或者直接查看渲染前的 HTML,如果第二頁之後的連結不在里面,就要留意了。

  • 分頁节点是否真的是带 href 的 a 标簽,而不是按钮或空連結;
  • 從列表第一頁能否一路点到最後一頁,中間有没有断点;
  • 分頁 URL 是否被 robots.txt、noindex 或參數過滤規則挡住;
  • 翻頁是否需要滚動、悬停、点击二次確認才會出現;
  • 進入分頁後返回列表,路径是否還指向原来的栏目。

每頁條數:別為了「看起来内容多」而塞满

每頁 10 條和每頁 100 條,是两種不同的工程。條數太少,翻頁次數暴涨,深层内容离首頁越来越遠;條數太多,列表頁本身變得很重,加载慢、首屏挤,訪客也更难掃讀。比較稳妥的做法是让列表頁保持轻量:缩略图、标题、摘要、時間,控制在能快速浏览的程度,把重量級内容留在詳情頁。栏目内容不多时,也不要硬撑一個看起来很長的列表,宁可把每頁條數調小一点,也別让一頁里塞進大量重复推荐位。

分頁頁面的标题別直接複製第一頁

第 2、3 頁的 title 和 description 常常和第一頁一模一样,几十個頁面共用一個标题。訪客在标簽頁上一眼看不出区別,搜尋结果里也是同样的文案反复出現。可以在标题里带上頁碼或内容区間,描述里換成该頁實际包含的内容方向。更要注意的是,分頁頁本身通常是聚合頁,別让它抢了詳情頁该有的位置;如果分頁只承担導航功能、没有獨立價值,可以考虑用合适的方式降低它的權重,而不是让它變成一堆薄内容。

三種翻頁方式的取舍

传统分頁連結

结构最清楚,每一頁都有獨立 URL,便于被逐個發現。缺点是翻到很後面时訪客体驗一般,适合内容量中等、需要被逐頁收錄的栏目。

加载更多按钮

對訪客友好,但只加了按钮、不加可訪問連結的话,後面的内容可能永遠進不了抓取范围。至少要让列表第一頁里存在通往後續内容的連結。

無限滚動

体驗流畅,但對抓取和分享都不友好:没有獨立的可複製地址,蜘蛛也很难滚到底。如果确實要用,建议配合一個可以完整翻頁的备用路径。

分頁與 sitemap、内鏈的配合

站点地图一般只提交列表第一頁,深层内容還是靠詳情頁自己進地图。所以別指望分頁連結承担全部發現任務:重要詳情頁该進 sitemap 就進,该從栏目頁直连就直连。内鏈方面,列表頁顶部的固定入口尽量不要長期被促销位占满,让核心栏目在首屏就能点到,比把連結全堆在頁脚更有效。

一份可执行的自查清單

  1. 關掉脚本,看分頁連結是否仍在 HTML 中;
  2. 從第一頁连續点到最後,確認没有断鏈和回环;
  3. 检查分頁 URL 是否被規則誤挡,狀態碼是否正常;
  4. 抽查第 2、3 頁的标题與描述,是否與第一頁完全重复;
  5. 確認每頁條數和列表頁加载体积處在可接受范围;
  6. 核對重要詳情頁是否已進入 sitemap 和内鏈体系;
  7. 记錄一次翻頁路径,作為下次改動後的對照。
分頁不是排版细节,它决定了内容能不能被走到。定期走一遍翻頁路径,比事後猜测為什么新内容迟迟没動静要實在得多。