站点做久了，总会在目录里留下一些说不清来历的页面：活动已经结束的专题、改版前的旧栏目、产品下架后仍挂着的详情页、只有几行字又没有内链指向的孤岛内容。这些页面单看影响不大，累积起来却会持续消耗蜘蛛的抓取时间，也会让访客顺着内链走进一堆过时信息。定期做一次陈旧内容盘点，是站点运营里性价比很高的例行工作。
先定义：什么算陈旧低质
不同站点标准不同，但可以从几个角度判断：
- 时间维度：发布时间超过一两年、期间没有任何实质更新，且主题本身时效性强，比如活动、价格、年度盘点。
- 流量维度：长期几乎没有自然访问，站内搜索也搜不到，内链入口为零。
- 质量维度：内容明显低于现在的编辑标准，比如几百字的凑数文、信息已过期、图片失效。
- 重复维度：和多篇页面讲同一件事，标题、结构高度相似，彼此争夺同一个需求。
有一个容易踩的坑：没有流量不等于该删。有些页面属于服务性内容，访问量本来就低，但用户确实需要，比如售后说明、常见问题、政策条款。
盘点：用几份数据交叉比对
常用的几类数据源
- 服务器日志：看近几个月蜘蛛对各目录的抓取频次，找出被抓很多但内容几乎没变化的地址。
- Sitemap 与索引情况：对比提交的地址数量和实际被处理的量，差距大的目录往往问题比较集中。
- 站内搜索词与 404 记录：前者反映用户真实需求，后者常常暴露出已删除但内链还没清理的页面。
- 内链关系导出：找出零入链页面，这类内容往往连自己人都已经忘了。
把这几份数据放在一起看，通常会浮现出几个问题目录，比逐页翻查省力得多。
四类处理动作
- 更新：主题仍然有价值，只是内容旧了。补数据、换案例、调整结构，比重写一篇更省力。
- 合并：多篇同题内容整合成一篇更完整的，老地址 301 到新地址，并把站内链接一并指向新页。
- 下线：确实没有保留价值的，返回 410 或 404；如果暂时想留着又不希望被抓，可以用 noindex 并移出 Sitemap。
- 归档：历史资料有留存意义、但不适合出现在主流程里的，收进归档栏目，去掉主导航入口，保留可访问状态。
执行节奏：别一次清掉一大片
- 分批处理，一次几十到几百条，观察几周抓取和流量变化再继续下一批。
- 删除前先确认没有有价值的外链指向，有的话优先考虑 301 而不是直接下线。
- 同步清理内链、Sitemap、导航、面包屑、相关推荐里的入口，避免处理后留下死链。
- 保留一份变更记录：哪个地址做了什么处理，将来出问题能对上账。
清理的目标不是让页面数量变少，而是让保留下来的页面更容易被找到、被信任。数量减少只是顺带结果。
清理后要复查的事
- 错误页是否返回了正确的状态码，页面上是否给出有用的导航和搜索入口。
- Sitemap 是否已同步更新，是否还残留已下线地址。
- 重要页面被抓取的频次是否有变化，这是清理效果比较直接的观察信号。
- 转化路径是否受影响，尤其注意栏目页、落地页被误删的情况。
这项工作不需要一次做得很彻底，按季度或半年跑一轮，每次处理掉一批问题目录，站点结构会慢慢变得清爽。比起不断堆新内容，先把旧账理清，往往对抓取和访客体验的帮助更直接。