标签：抓取清单

Sitemap 怎么写才不浪费抓取：lastmod、分片与收录范围的取舍

Sitemap 是给蜘蛛的一份 URL 清单，帮它发现站内遗漏的地址，但不决定抓取与收录。文章讲清楚 lastmod 怎么写才可信、分片与索引文件如何组织、哪些 URL 不该放进去，以及提交后怎样通过日志观察这份清单有没有真的被用起来。