很多站点在服務器层面返回 200，頁面却是一片空白或只有一句“暂無内容”。對用戶来说這只是一次不愉快的訪問，對搜尋蜘蛛来说，它却是一個需要被解析、渲染、判断價值的正常頁面。這類頁面积累到一定數量，會影响到蜘蛛對整站质量的判断，也會挤占本该分给有效内容的抓取资源。
软404長什么样
软404指的是 HTTP 狀態碼為 200，但頁面實质上没有可索引内容的情形。它和返回 404 的頁面不同，後者至少给了一個明确信号。
- 站内搜尋無结果时，仍返回 200 並展示“未找到相關结果”；
- 篩選條件组合後结果為空，URL 却仍然有效；
- 内容已下架，頁面保留了标题和框架，正文被清空；
- 分頁參數超出范围，比如第 999 頁，頁面只顯示空列表；
- 栏目存在但没有發布任何内容，僅剩一句占位文案。
它如何影响 URL 發現
蜘蛛的抓取額度是有限的。当它反复訪問一批低價值頁面，用于發現新連結的請求就會减少。更麻烦的是連結图谱：空结果頁往往和其他頁面互相連結，形成一個没有出口價值的網状结构，蜘蛛在里面绕圈，却走不到真正的内容頁。
同时，如果這些頁面带有 canonical、分頁或结构化資料标记，還可能把错誤信号传递给其他正常頁面。比如一個空列表頁声明 canonical 指向栏目首頁，會让栏目首頁的定位變得模糊。
判断标准可以简單一点：這個頁面如果被人轉發出去，對方点開會不會觉得被骗。如果答案是會，那它大概率不该以 200 的狀態存在。
處理思路
- 站内搜尋無结果：返回 404 或 410，並在頁面上提供热门内容入口，而不是留一句干巴巴的提示。
- 篩選與排序參數：当结果為空时，收敛參數並重定向到基础列表頁，或直接返回 404；同时用 robots.txt 或 noindex 限制组合參數的大規模扩張。
- 已下架内容：能恢复就恢复；确實不再提供的，返回 410 比返回 200 更清晰，也更省抓取。
- 分頁越界：把超出范围的頁碼做收敛，或者返回 404，避免生成無限序列。
- 空栏目：先填内容再開放入口，不要在導航里挂一個空壳。
空结果頁與列表頁的邊界
並不是所有空頁面都要删掉。分類列表頁即使目前條目少，只要能稳定更新、有明确主题，就值得保留；而由用戶任意輸入组合生成的空頁面，通常没有長期價值。区分的關键在于：這個 URL 是否會被稳定地引用，未来是否有内容填充。
對于确實需要保留但暂时没有内容的頁面，可以先用 noindex 控制索引，等有内容後再放開。這比直接返回 404 更适合過渡期。
监控與驗證
服務器日誌里，大量返回 200 但响應体很小的請求值得關注。可以按狀態碼加响應体积做一次篩選，再结合頁面模板归類。同时定期用抓取工具抽样检查，看是否存在渲染後才暴露的空内容——JS 渲染的頁面尤其容易出現這種情况：HTML 返回时是空的，渲染之後才有内容，蜘蛛的判断會因此出現偏差。
把软404治理当成一次结构梳理，而不只是修 bug。清理掉無意义的 URL，站点的連結结构會更清晰，蜘蛛也更容易把時間花在真正值得抓的頁面上。