标签：内容编码

压缩、字符集与乱码页面：蜘蛛解析失败的那几种情况

浏览器能正常打开的页面，蜘蛛拿到的却可能是乱码或空白。问题常出在传输与编码两处：Content-Encoding 声明与实际内容不一致、双重压缩、字符集声明和文件编码不匹配。本文梳理这几类常见故障的表现、它们对链接与正文解析的影响，并给出一套可以直接照做的排查清单。