标签：低质页面

站点运营：清理低质页面，为URL发现留出空间

蜘蛛池的常见做法是堆砌大量URL，但真正有效的URL发现，恰恰需要做减法。本文从低质页面如何影响蜘蛛抓取入手，给出识别与清理低质页面的具体运营动作，帮助站点把抓取预算留给更有价值的页面。