标签：search crawl

蜘蛛抓取前的第一道门槛：域名解析与连接建立

蜘蛛抓取一条 URL 之前，先要完成域名解析、连接建立与 TLS 握手。这些环节出问题时，访问日志里往往没有记录，表现只是抓取频次下降或结果不一致。本文梳理解析、证书、CDN 与源站之间的常见断点，以及从日志和数据中定位问题的方法。