标签：HTML压缩

页面体积与抓取吞吐：HTML 变重之后，URL 发现会慢在哪里

抓取预算不只看 URL 数量，每个请求的时间和带宽成本同样决定蜘蛛一天能跑多少页面。本文从 HTML 体积、内联资源、gzip 与 brotli 压缩、图片处理入手，说明页面变重后 URL 发现与再抓取会受到哪些影响，并给出一套可落地的自查方法与优化顺序。