站点做久了,总会积累一批“活着的死页面”:活动早就结束、产品早已下架、政策文件被新版替代,但页面还在,还被内链指着,还在 sitemap 里,搜索蜘蛛还会反复来抓。单看一个页面没什么危害,数量一多就会挤占抓取预算,用户也会在站点里绕圈。
先判断哪些页面真的该处理
不要凭感觉删。先把候选页面拉成一张表,字段至少包括:URL、页面类型、最近 90 天自然流量、外链数量、最后更新时间、是否还有转化动作。判断顺序大致如下:
- 有流量也有外链:优先更新内容,不要动 URL。
- 有外链但没流量:保留原地址,做内容重写或指向新页面的跳转,先保住外链价值。
- 没有流量也没有外链,内容确实过期:可以进入下架流程。
- 两个页面主题重复:选一个作为主页面,另一个合并过去。
四种处理方式,对应四种场景
更新
适合时效性内容但主题仍成立的情况。补充最新数据、更新案例时间、改掉过期的联系方式。更新时顺手改一下页面的最后修改时间标注,让读者知道这是维护过的内容,而不是三年前的旧文。
合并与跳转
把被合并页面的有效段落搬进主页面,然后做 301 指向主页面。注意跳转目标要和原内容同主题,别把“秋季活动页”一股脑跳到首页,那等于告诉搜索引擎这个地址没有对应内容。
下架
内容彻底无效、且没有外部链接时,返回 410 或 404 都可以。410 的语义更明确,但并不是所有站点都方便配置。不要用 200 状态码返回一个“内容已删除”的提示页,那会变成软 404。
保留但削弱
有些页面需要长期留存作为存档,比如历史公告、旧版条款。这类页面可以保留,但要处理三件事:从主导航、侧栏推荐、相关阅读里移除入口;从 sitemap 中撤下;页面顶部加一句说明,引导用户去看当前版本。
下架前后要同步的清单
- 内链:搜索全站引用该 URL 的锚文本,逐个改成新地址或直接删掉链接。
- sitemap:下架后及时从站点地图里移除,别让无效地址继续提交。
- 导航与聚合页:栏目列表、标签页、专题页里的入口一并清理。
- 结构化数据:如果页面带有商品、活动类标记,下架要连同标记一起处理。
- 站内搜索:确认站内搜索结果里不再出现已下架的条目。
归档和下架是分批推进的工作,不建议一次性批量删除几百个页面。搜索引擎和用户都需要一个适应过程,站点本身的收录结构也会跟着波动。
下架后的观察期
处理完一批后,留出两到四周观察:看服务器日志里这些地址的抓取频次是否下降,看站点整体的抓取总量有没有被转移到有效页面上,看核心页面流量是否稳定。如果某个页面下架后自然流量明显下滑,而它本身还有转化,就说明判断失误,及时恢复或改写。
把这件事做成常规动作会轻松很多:每季度固定盘点一次,按“最后更新时间超过一年、且近三个月无流量”作为初筛条件,然后人工过一遍。旧内容治理不是一次性清理,而是让站点的内容库始终保持在可维护的状态。