标簽：压缩编碼

搜尋蜘蛛抓取：Content-Encoding 與分块传輸不一致造成的正文残缺排查

蜘蛛抓取时正文要经压缩解碼與分块拼接才完整，响應头與資料流不一致會让它只拿到半截内容。本文按取原始响應、比對压缩前後字节、核對分块结尾、检查代理與源站压缩层級的顺序，梳理传輸层異常的排查方法與修复後的观察指标。