很多站点的測試环境、预發布站点只是為了赶進度临时搭起来的，域名随手起一個，訪問驗證也没加，等域名被搜尋引擎抓走才想起来處理。這類頁面通常内容不完整、價格和文案還停留在草稿狀態，一旦和正式站同时出現在搜尋结果里，既容易造成重复内容，也會让訪客看到還没上线的版本。
測試站被抓之後會带来什么
影响不一定立刻顯現，但下面几個問题是常见的：
- 同一批内容出現在两個域名上，權重和流量被分散；
- 草稿價格、错別字、占位图被訪客看到，影响信任；
- 測試机资源有限又经常關閉，蜘蛛反复訪問失敗，抓取预算被白白消耗；
- 清理測試站时忘了處理已收錄連結，最後變成一批死鏈。
常见的泄露路径
- 解析记錄泄露：test、dev、beta 之類子域直接指向公網 IP，没有任何訪問限制。
- robots.txt 照搬正式站：允许抓取，等于主動開门；有些站点虽然寫了 Disallow，但頁面早就被外部連結带出去了。
- IP 直连可訪問：域名没暴露，但通過 IP 加端口就能打開同一套站点。
- 外鏈與文档泄露：设計稿、投标材料、客戶沟通记錄里带了測試連結，被人顺手贴到公開頁面。
- 存储桶公開讀：静態资源桶设成匿名可讀，整站目錄结构可以被直接爬下来。
自查清單
域名與解析
先把所有子域列一遍，包括歷史遗留的、当初做活動临时開的。逐個訪問，看返回什么内容、能否直接進首頁或後台。不确定的先核對 DNS 解析记錄，把不再使用的记錄删掉，而不是只靠记忆判断。
抓取與訪問控制
- 測試站统一加一层訪問驗證，最简單的做法是 HTTP 基础認證或公司内網白名單。
- robots.txt 對全站寫 Disallow: /，同时頁面加上 noindex 元标簽。两道一起做，避免只挡住抓取却挡不住展示。
- 確認測試站没有把 canonical 指向正式站對應頁面，也不要反過来让正式站被測試环境干扰判断，測試站自身應明确返回 noindex。
- 後台、接口文档、調试頁面、上传目錄這些路径單獨確認一遍，它們往往不在模板的统一處理范围内。
入口引用
用站内搜尋和外鏈查询工具查一遍測試域名，看有没有被引用。常见来源是帮助中心文档、招聘頁面里的作品連結、论坛回答和群聊里發出去的截图。找到一處就改一處，顺手把連結換成正式站地址。
已经被收錄了怎么办
- 先用 site: 指令和站長平台的資料確認收錄范围，不要凭印象判断。
- 确保頁面能正常訪問並返回 noindex，不要直接關站。否則蜘蛛看到的是 404 或 5xx，狀態更新反而更慢。
- 在站長平台提交移除請求，按 URL 逐個處理，別指望一次批量就能清干净。
- 把測試站上确實有價值的内容迁移到正式站，然後設定 301 指向正式站的對應頁面。
- 观察两到四周，確認收錄數量下降之後，再彻底關停測試环境。
日常习惯上的两点建议
- 新建測試环境时就把訪問限制、robots 和 noindex 做成模板的一部分，不要靠個人记性。
- 每季度把子域清單過一遍，标记出已下线但解析還在的记錄，及时清理。
測試站不是不能存在，而是不该以“能被公開訪問和抓取”的方式存在。上线前多花五分钟設定訪問限制，比事後一封封提交移除請求省事得多。