标簽：资源抓取

图片、PDF、视频：非 HTML 资源的收錄逻辑和常见卡点

網頁之外，图片、PDF、视频等非 HTML 资源同样可能進入搜尋索引，但它們的發現和收錄路径與普通頁面不同。本文梳理资源被爬到的入口、图片與文档各自的判断依據，以及 robots、CDN、临时參數等容易让资源一直進不了索引的细节。