标签：抓取解析限制

入口页 HTML 体积过大，搜索蜘蛛会不会截断解析、漏掉后面的目标链接？

入口页能被搜索蜘蛛访问，却始终没有目标 URL 的抓取记录，有时不是链接写错了，而是页面太大或链接位置太靠后。本文说明抓取上限与解析上限的区别、几种容易触发截断的写法、判断是否被截断的对比方法，以及把体积和链接数量压回合理区间的具体做法。