标签：抓取指令自查

站点运营：页面级 robots 指令自查，noindex 别误伤正式页面

robots.txt 之外，页面级指令同样会影响抓取与索引。本文梳理 meta robots 与 X-Robots-Tag 的作用范围、叠加规则和六类常见误配，并给出一份可以照着做的自查清单，帮你在改动前想清楚影响面。