标簽：内容编碼

压缩、字符集與乱碼頁面：蜘蛛解析失敗的那几種情况

浏览器能正常打開的頁面，蜘蛛拿到的却可能是乱碼或空白。問题常出在传輸與编碼两處：Content-Encoding 声明與實际内容不一致、双重压缩、字符集声明和文件编碼不匹配。本文梳理這几類常见故障的表現、它們對連結與正文解析的影响，並给出一套可以直接照做的排查清單。