新栏目上线时，很多团队的第一反應是“内容寫完了吗、设計稿還原了吗”。但栏目能不能被搜尋蜘蛛發現、能不能顺着連結走進去，往往没有人负责。结果就是頁面已经對外可见，抓取记錄里却始终看不到它。
為什么新栏目容易“生出来却没人發現”
老頁面的抓取路径是長期积累出来的：主導航里有它，歷史文章里有人鏈到它，sitemap 里有它，蜘蛛走熟了就形成习惯。新栏目一開始不具备這些條件，如果上线时不做任何引導，就等于把一扇门開在墙的背後。
入口位置太弱
- 只在頁脚最深處出現一個文字鏈，位置随主题改版就消失；
- 首頁導航没有位置，靠一張临时 banner 顶替；
- 栏目首頁是空列表，或者列表内容全靠前端請求後渲染。
配套文件没跟上
sitemap 還是上周那一份，robots.txt 里恰好有一條過宽的目錄拦截規則，新栏目用的分頁參數又被通用規則一並屏蔽掉。這些問题單獨看都不嚴重，叠在一起就足以让新栏目長期處于“無人到訪”的狀態。
上线前的自查清單
下面這几項建议在上线当天逐條確認，而不是等流量資料不好时再回头翻。
- 栏目入口可点：從首頁出發，只用鼠标点击，能不能在三步之内到達新栏目首頁。如果只能靠站内搜尋找到，入口就偏弱。
- 栏目首頁有實体内容：打開後不是空白模板，至少有若干條已發布條目，並且這些條目的連結是可直接訪問的獨立 URL。
- 連結是普通連結：導航和列表里的連結最好是 a 标簽加 href，而不是点击後由脚本跳轉。脚本跳轉對用戶没問题，對抓取不友好。
- 内鏈引導到位：從两三個已有相關内容的頁面，用自然语境加一條指向新栏目的連結。不必堆砌，一两處真實相關的引用比十處硬塞更有用。
- sitemap 已补充：把新栏目首頁和已發布條目的地址加進去，並確認文件本身能被正常訪問、没有返回错誤狀態。
- robots 規則放行：检查是否有针對新目錄、新路径前缀、分頁參數的屏蔽規則，尤其是從舊項目沿用的通用規則。
- 狀態碼與規范地址正确：栏目首頁返回 200，带參數版本能用 canonical 指回干净地址，不要出現同一批内容多個地址各自返回 200 的情况。
- 渲染结果可讀：用抓取工具或查看源碼的方式確認，頁面主体内容在初始响應里已经存在，而不是等待脚本执行後才出現。
分頁與篩選參數需要單獨想一遍
列表頁的分頁最容易出問题。常见的做法是把分頁地址保留為可抓取、可点击的普通連結，同时给篩選、排序這類组合參數加上規范地址或屏蔽。要避免两種极端：一種是所有分頁都被挡住，深层内容永遠進不去；另一種是几十種篩選组合全部放開，让抓取预算消耗在几乎重复的頁面上。
上线後一周该观察什么
- 服務器日誌里是否出現對新栏目路径的請求，以及請求的是栏目首頁還是僅停留在列表頁；
- 抓取到的狀態碼是否正常，有没有出現 5xx 或長時間超时；
- 被抓取的地址數量是否在缓慢增長，而不是第一波之後就停住；
- 站内点击與訪問資料是否同步出現，如果只有抓取没有点击，需要看标题和摘要是否有吸引力。
抓取通路這件事，本质上是把“用戶能点到”和“蜘蛛能走到”這两件事對齐。能同时满足這两條，剩下的就交给時間和内容质量。
几個常见誤区
- 把新栏目一次性塞進導航所有位置，短期看似曝光多，實际會稀释整站導航的可讀性；
- 上线後立刻大量互鏈、批量提交地址，動作幅度遠超正常运营节奏；
- 只看後台的收錄數字，却不看日誌里蜘蛛實际請求了哪些地址。
把上面這些检查做成一份上线清單，交给负责發布的同事执行，成本不高，但能省掉很多“内容明明做了却没人看到”的返工。