提交了新 URL 之後，很多人會一直盯着後台的狀態變化。有一種情况比較磨人：狀態停在“已發現，尚未抓取”，等上几周也没有動静。它和“已抓取，尚未编入索引”不是一回事，處理方向也完全不同。
先把三種狀態分開看
- 已發現：搜尋引擎從站点地图、内鏈或外鏈拿到了這個地址，但還没有真正訪問服務器。
- 已抓取：蜘蛛已经把頁面内容取回去了，正在判断要不要放進索引。
- 已编入索引：頁面進入索引，之後才谈得上能否被搜尋到、排在第几。
卡在第一步，意味着服務器端其實什么都没發生。這时候去改标题、堆關鍵詞、反复刷新提交，作用都很有限，因為對方還没看過這一頁。
想確認就更直接一点：翻一下服務器訪問日誌，如果對應路径上完全没有蜘蛛的记錄，那說明确實一次都没被抓取過，而不是抓了没收錄。
被發現了却迟迟不抓，常见的原因
待抓取队列本身就是排序的
搜尋引擎不會按提交時間先来後到地處理，它會根據站点整体權重、頁面预期價值、歷史抓取表現、更新频率等因素决定先後。新站、長期更新不活跃的站，队列推進慢是常態，不属于異常。
站点里低價值 URL 太多
如果站点地图里塞了几萬條带參數的篩選頁、排序頁、重复地址，或者站内存在大量内容近似的模板頁，抓取资源會被這些地址消耗掉，真正想被收錄的頁面排在後面。這不是“提交得不够多”，恰恰是提交得太多太杂。
頁面缺少内鏈支撑
只出現在站点地图里、没有任何站内連結指向的孤立頁面，優先級通常低于從首頁几跳就能到達的頁面。蜘蛛顺着連結爬行时，連結既是發現渠道，也是一種投票。
服務器响應慢或经常出错
响應時間過長、频繁出現 5xx、大量 301 跳轉鏈，都會让蜘蛛降低對该站点的抓取意愿。抓取是一筆成本，站点越費劲，蜘蛛来的次數就越少。
頁面本身缺少獨立價值
内容极短、與站内其他頁面高度雷同、只是換了個關鍵詞拼出来的頁面，即便被抓，也很难進入索引，更不用说带来曝光。這類頁面往往不只是排队問题。
可以按這個顺序排查
- 確認 robots.txt 没有屏蔽该路径，頁面也没有誤加 noindex。
- 用抓取工具或直接訪問確認頁面返回 200，不是 404，也不是一连串跳轉。
- 检查是否有至少一條站内連結指向它，並尽量缩短從首頁到它的点击深度。
- 审视站点地图：是否混進了大量參數頁、重复地址、已下线頁面，能不能只保留真正希望被收錄的 URL。
- 看服務器日誌和响應時間，確認蜘蛛来訪时站点没有拖後腿。
- 评估頁面内容是否和已有頁面差异明顯，必要时合並或补充，而不是繼續增加近似頁面。
等待期里更值得做的事
- 把新頁面挂到相關的老頁面内鏈上，让它有正常的入口。
- 控制新增頁面的节奏，一次放出几十上百個新地址，反而容易一起排队。
- 不要反复重新提交同一個 URL，也不要為了“催促”而频繁改動頁面结构。
- 先观察一到两周的變化，再做判断。
提交不等于抓取，抓取也不等于收錄。前者是排队，後者是篩選，規律不一样。
把已经進入队列的頁面照顾好：给連結、修响應速度、减少重复地址、保證内容有獨立價值，剩下的交给時間。相比反复提交，這些動作對抓取優先級的影响通常更實在。