标签：主机名统一

站点运营：搜索蜘蛛的URL发现，从 www 与非 www、HTTP 与 HTTPS 的主机名统一说起

同一份内容可能对应带 www 与不带 www、http 与 https 等多套 URL，蜘蛛会把它们当成不同地址分别抓取。本文给出四条 curl 命令快速核对状态码，梳理从 301 跳转、证书覆盖、内链与站点地图到 CDN 回源域名的统一做法，并列出测试子域、端口变体等容易漏掉的细节。