蜘
蜘蛛池入口页的 meta 标签:canonical、noindex 与 X-Robots-Tag 的使用边界
入口页的 meta 标签决定蜘蛛抓到页面之后怎么处理,是留在索引里还是只当一条通路。本文把抓取控制、重复归并、展示控制三类指令分开讲,说明 canonical 的使用底线、noindex 与 nofollow 的区别、X-Robots-Tag 与 meta 的关系,并整理常见误区与上线前检查项。
阅读全文 →共找到 1 篇与“meta标签”相关的文章。
入口页的 meta 标签决定蜘蛛抓到页面之后怎么处理,是留在索引里还是只当一条通路。本文把抓取控制、重复归并、展示控制三类指令分开讲,说明 canonical 的使用底线、noindex 与 nofollow 的区别、X-Robots-Tag 与 meta 的关系,并整理常见误区与上线前检查项。
阅读全文 →