标签：DOM优化

HTML 体积与 DOM 规模：偏重的页面会怎样影响抓取效率

蜘蛛抓取一个 URL 是有成本的：等待响应、下载字节、解析 DOM，必要时还要拉取资源并渲染。页面越重，同样的抓取容量能覆盖的 URL 就越少。本文拆解 HTML 体积的常见来源，说明重页面对抓取覆盖面和抓取深度的影响，并给出分页、压缩、懒加载等可以落地的减负思路。