标签：站点可用性

链接可见却抓不到：解析、证书与访问限制对 URL 发现的影响

链接写在页面里只是第一步，能否真正被抓取还取决于服务器与网络环境。本文梳理 DNS 解析、证书配置、robots.txt、WAF 与限流策略这些让 URL 发现停在门外的常见原因，并给出从外到内的排查顺序和日常维护习惯。