自動生成的列表頁，往往没人管
栏目頁和内容頁通常有人盯着，改标题、調结构、补内容都有人负责。但标簽頁、作者頁、日期归档頁這類由系統自動生成的列表頁，很多人從上线那天起就没再看過第二眼。它們的數量可能比内容頁還多，頁面本身却只是标题加摘要的重复堆叠，既没有獨立價值，又占着站内連結位置和抓取入口。
先盘点站点里有哪些自動列表頁
- 标簽頁與關鍵詞聚合頁：一篇文章打三五個标簽，每個标簽都能翻出一串列表。
- 分類归档頁：栏目下的分頁列表，翻到第几十頁依然存在。
- 日期归档頁：按年月生成的归档，内容通常和首頁、栏目頁高度重复。
- 作者頁：多作者站点常见，頁面可能只有作者名加一排文章标题。
- 站内搜尋或條件组合生成的列表頁：這類按篩選參數單獨處理。
盘点时不用一個個打開看，先從後台或資料库統計各類型的 URL 數量，再抽样看几頁，就能大致判断問题有多嚴重。
判断标准：這個頁面自己能不能立住
拿一個列表頁問三個問题：它有没有一個明确的主题？除了标题連結，還有没有別的内容，比如一段說明、排序篩選、精選推荐？用戶直接落到這個頁面，會不會觉得来對了地方？三個問题都答不上来，說明它更接近索引頁，而不是值得被單獨訪問的内容頁。
标簽頁的三種處理
- 有聚合價值的：标簽能對應一個真實需求，而且持續有内容补充。给它寫一段简短介绍，同时控制标簽數量，避免一篇文章挂七八個标簽。
- 價值一般的：頁面保留，但別让它在導航、侧栏、正文里到處出現，减少内鏈入口，让它自然沉下去。
- 纯粹凑數的：不生成獨立頁面，改成頁面内的前端篩選，或者直接合並到上級栏目。
归档頁與作者頁
日期归档多數情况下可以直接關掉。用戶很少按某個年月去找内容，這類頁面也很难提供栏目頁之外的信息。分類归档建议保留，但注意两点：分頁要能正常翻到後面的内容頁，不要只靠脚本加载；翻到很深的頁碼时，可以考虑收敛，把入口和權重留给前几頁。
作者頁不要做成纯列表。如果站点有若干固定作者，可以补上作者介绍、领域方向、代表文章，让它成為一個有信息量的頁面；如果只是後台自動生成的名字頁，完全可以不做成可訪問的地址。
用统一規則收口，而不是一個個改
- 先統計數量：标簽頁、归档頁各有多少，優先處理規模最大的那一類。
- 定規則：哪些保留、哪些合並、哪些不輸出可点击連結，先寫下来再動手。
- 改模板：列表頁的标题與描述模板要能区分不同頁面，別让所有标簽頁都是同一句“某标簽 - 網站名”。
- 减入口：從頁脚、侧栏撤掉全量标簽云和全部归档連結，只留少量有價值的入口。
- 看日誌：改完之後观察一段時間，確認這些頁面的抓取請求在下降，同时内容頁的抓取没有受到牵连。
別走向另一個极端
有些站点發現問题後，把所有列表頁一律设為不索引，结果把真正有價值的聚合入口也一起關掉了。标簽頁和归档頁本身不是坏東西，一個主题清晰、持續更新的标簽頁，有时比單篇文章更容易承接長尾需求。關键在于区別對待：有價值的补内容、给入口，没有價值的收連結、合頁面。數量少了、入口清了，抓取和用戶注意力才會落到真正需要被看到的内容上。
處理自動列表頁的目标不是把它們全部删掉，而是让每個保留下来的頁面都有存在的理由。這條規則同样适用于之後新增的任何一類自動生成頁面。