标簽：索引邊界

分頁與列表頁的收錄邊界：哪些该進索引，哪些留在抓取层就够

列表頁和分頁頁常被当成收錄目标，其實它們更多是帮爬虫發現詳情頁的通道。本文按“有没有搜尋需求、内容是否重复、入口是否唯一”三個問题，梳理第一頁與後續翻頁、篩選排序组合頁、标簽聚合頁的處理差异，並给出用 site 查询、服務器日誌和索引覆盖报告核對判断的检查方式。