新頁面發布後迟迟没有出現在搜尋结果里，很多人第一反應是内容不够好。内容质量当然重要，但更前面的問题是：搜尋引擎有没有發現這個 URL。URL 發現、抓取、索引是三件事，顺序不能颠倒。發現是入口，抓取是讀取，索引是建立可检索的记錄。下面按這個顺序梳理，哪些环节可控，哪些只能等待。
URL 發現是收錄的起点
搜尋引擎不會主動猜测一個從未出現過的地址。它需要從已知頁面、站点地图、外部連結或歷史抓取记錄里拿到 URL。如果新頁面没有任何入口，只靠手動提交，發現效率會很不稳定。常见的發現路径有三類：站内連結、站点地图、站外引用。它們不是互相替代，而是互相补充。
内鏈：最稳定的發現路径
站内連結通常是搜尋引擎發現新 URL 最稳定的方式。導航、栏目列表、面包屑、相關推荐、上一頁下一頁，都能把抓取程序带到新頁面。這里要注意两点：連結必须是可抓取的 a href，而不是只寫了点击事件的按钮；連結所在頁面本身要能被抓取，否則入口等于不存在。
如果新頁面只放在首頁某個轮播图里，而且轮播依赖脚本切換，抓取端可能只看到第一張。更稳妥的做法是在列表頁、归档頁或专题頁留下普通連結。
站点地图：补充，不是替代
站点地图适合集中提交新頁面、深层頁面和更新較频繁的頁面。但它更像是告诉搜尋引擎這里有這些 URL，並不保證一定會抓取和收錄。如果頁面没有任何内鏈，只放在站点地图里，抓取優先級通常不會高。
使用站点地图时，lastmod 尽量准确。把所有頁面都标成刚刚更新，時間久了反而會让這個字段失去參考價值。
外部引用與分享連結
来自其他站点的連結可以让新 URL 更快進入發現队列。社交平台分享、行业目錄、合作頁面上的連結也有類似作用，但效果不稳定，也不應该作為唯一手段。外鏈能缩短發現時間，不代表一定能通過後續的质量判断。
發現之後，還要過抓取和索引两關
URL 被發現後，搜尋引擎會安排抓取。抓取到的頁面要经過内容解析、重复判断、质量评估，才可能進入索引。這里容易出現几個卡点：
- 頁面返回 200，但正文几乎没有有效内容，接近空頁面。
- 多個 URL 内容高度相似，規范标簽没有指向主版本。
- URL 參數、大小寫、末尾斜杠不统一，同一内容出現多個地址。
- 頁面被 robots.txt 屏蔽抓取，或者被 noindex 阻止索引。
- 正文依赖脚本渲染，抓取端拿到的内容很少。
這些問题不一定導致完全不被收錄，但會降低進入索引的概率，或者让頁面進入“已發現但未抓取”“已抓取但未索引”等狀態。
發布後的自查顺序
- 確認 URL 返回 200，並且没有誤设 noindex。
- 检查 robots.txt 是否屏蔽了该目錄或该 URL。
- 在站内给它至少一個普通連結入口，最好来自相關列表頁或正文。
- 把 URL 加入站点地图，並保持 lastmod 真實。
- 检查 canonical 是否指向自己或正确的主版本。
- 確認正文在關閉脚本後仍可讀到主要内容。
- 观察服務器日誌里该 URL 是否出現抓取记錄，再判断是否進入索引。
抓取與收錄的区別要分清
日誌里出現抓取，只說明搜尋引擎来過，不代表已经收錄。搜尋结果里没有展示，也不一定等于没有索引，可能是可检索性不足或没有合适展現。排查时先把“發現、抓取、索引、展現”分開看，再决定是补入口、改内容還是處理重复。
收錄没有绝對的時間表。能控制的是让 URL 更容易被發現、更容易被正确讀取、更少出現重复和規范問题，剩下的交给搜尋引擎的判断。