标簽：子资源

子资源抓取：蜘蛛取走 HTML 之後還會下载什么

蜘蛛抓取並不止于 HTML 主文档，頁面依赖的 CSS、JavaScript、图片等子资源同样可能被取走。本文說明這些资源為什么影响蜘蛛看到的頁面、被屏蔽後會出什么問题，以及服務器侧的准备事項和一份自查清單。