标簽：附件治理

站点运营：附件與下载頁的抓取治理，別让大文件占满抓取预算

站点里的 PDF、压缩包、安装包同样是可抓取的 URL，數量一多就會挤占带宽和抓取配額。本文從附件分類、落地頁设計、响應头與 robots.txt 的配合、舊版本清理和日誌复核几個角度，给出可落地的附件治理思路。