标签：附件治理

站点运营：附件与下载页的抓取治理，别让大文件占满抓取预算

站点里的 PDF、压缩包、安装包同样是可抓取的 URL，数量一多就会挤占带宽和抓取配额。本文从附件分类、落地页设计、响应头与 robots.txt 的配合、旧版本清理和日志复核几个角度，给出可落地的附件治理思路。