首先,確認您的實際狀態
在開始排查問題之前,請先確認該頁面確實尚未被索引。在 Google 中搜尋 site:yourdomain.com/your-page —— 若沒有任何結果,代表尚未被索引。若想取得最準確的答案,請將網址貼到 Google Search Console 的「網址檢查」工具中,它會明確告訴您原因(已爬取但未索引/已發現但未爬取/遭封鎖等),而不必自行猜測。
1. noindex 標籤要求 Google 不要索引
檢視頁面原始碼並搜尋 <meta name="robots" content="noindex">。這是最常見的自我造成的原因 —— 通常是測試環境遺留下來的設定,或是 CMS/外掛的預設值,正式上線後從未關閉。
2. robots.txt 封鎖了爬蟲
檢查 yourdomain.com/robots.txt 中是否有符合您頁面路徑的 Disallow 規則。原本只針對網站某一區塊(例如 /admin/)設計的規則,有時會不小心涵蓋到超出預期的範圍。
3. canonical 標籤指向了別處
若頁面上的 <link rel="canonical"> 指向另一個網址,Google 會轉而索引那個網址 —— 並將您的頁面視為它的重複頁面。這在會自動產生 canonical 標籤的 CMS 平台上,特別容易被忽略。
4. 沒有內部連結指向該頁面
若某個頁面無法透過網站內(或外部網站)的連結被 Google 發現,即使已提交網站地圖,仍會大幅延緩被爬取的速度。請從首頁、分類頁面或最新文章列表連結到新頁面。
5. 內容看起來單薄或重複
Google 對爬取預算的分配相當有選擇性。獨特文字內容極少、或與您自己網站上另一個頁面高度相似的頁面,經常會在 Search Console 中被標示為「已爬取 - 目前未編入索引」—— 意即 Google 看過了,但選擇不索引它。
6. 網站或頁面本身太新
全新網域,或是沒有提交網站地圖、也沒有任何爬取紀錄的頁面,可能要在 Google 的發現佇列中等上數天到數週,爬蟲才會第一次造訪。這是唯一並非出於錯誤的原因 —— 純粹是時間問題,也是您唯一能實際加快的一項(詳見下方)。
頁面本身修正後,加快被發現的速度
當上述原因都已排除後,最快且合法有效的做法包括:在 Search Console 中提交更新過的網站地圖、針對個別頁面使用網址檢查工具的「要求建立索引」按鈕,以及對於支援此協定的搜尋引擎 —— Bing、Yandex、Seznam 和 Naver —— 在頁面上線的當下立即透過 IndexNow 通知,而不必等待它們下一次的排程爬取。Google 沒有對應的批次 API;Search Console 是唯一的操作管道。
快速診斷順序
- 執行免費的可索引性檢查,一次排除狀態碼、noindex、robots.txt 和 canonical 的問題。
- 開啟 Search Console 的網址檢查,查看確切的狀態與原因。
- 若顯示「已發現 - 目前未編入索引」,請改善頁面的可發現性:加強內部連結,並提供整潔的網站地圖。
- 若顯示「已爬取 - 目前未編入索引」,請改善內容:提供更多獨特價值,減少重複內容。
- 修正後要求建立索引一次,然後給它一些時間。
全站問題與單一頁面問題
若只有一個頁面遺漏,原因通常出在該頁面本身。若網站大部分頁面都未被索引,請先尋找全站性的原因:測試環境遺留的 noindex、封鎖所有內容的 robots.txt、封鎖 Googlebot 的 CDN 或防火牆,或是全站 canonical 都指向首頁。Search Console 的「網頁」報告可以讓您看出屬於哪一種情況。
常見問題
我應該等多久才需要擔心?
已有一定基礎的網站上的新頁面,大約一到兩週。全新網站則等上數週都屬正常。若重要頁面過了一個月仍未被索引,請依序排查上述原因。
提交網站地圖就能保證被索引嗎?
不能。網站地圖能幫助 Google 發現網址,但 Google 仍會根據頁面的價值與網站的整體品質,決定要爬取和索引哪些頁面。
防火牆或 CDN 會導致 Google 無法索引我的網站嗎?
會。如果機器人防護機制對 Googlebot 發出驗證挑戰或直接封鎖,Google 就無法擷取您的頁面。請查看 Search Console 的「檢索統計資料」以及網址檢查的即時測試,確認是否有擷取錯誤。
網頁速度會影響索引嗎?
會間接影響。非常緩慢或經常出錯的伺服器會讓 Google 減少爬取,新頁面也就更晚被發現。快速且穩定的伺服器能讓 Google 爬取您網站的更多內容。
為什麼我的頁面被索引後又被移除了?
Google 會持續重新評估頁面。常見原因包括新出現的重複內容、canonical 或 noindex 有所變更、重新爬取時發生伺服器錯誤,或 Google 判定該頁面提供的價值不高。我們的「恢復被移出索引的頁面」指南會逐一說明每種情況。