标簽：爬虫驗證

站点运营：驗證爬虫身份，別把 UA 字符串当成通行證

服務器的訪問日誌里，UA 寫着 Googlebot 的請求未必真来自搜尋引擎。本文整理几種驗證爬虫身份的常用做法，包括反向 DNS、官方 IP 段和行為特征，並给出誤伤與放行之間的取舍思路，帮助站点在拦截恶意請求的同时，別挡掉真正的搜尋蜘蛛。