瞭解 Google 使用者代理程式與網站的互動方式,有助於在 Google 生態系統的更多位置顯示您最重要的網頁,同時避免伺服器負載過重。無論您是網站擁有者或開發人員,這份文件都能協助您更有效控管網站的檢索方式。
您可以驗證存取伺服器的網路檢索器或擷取程式是否確實來自 Google,例如 Googlebot。
Google 檢索器會針對網站和伺服器自動調整,有效找出並顯示最新且最優質的內容。為協助您處理與伺服器和檢索相關的緊急狀況,您可以視需要主動降低檢索頻率。
您可以使用 robots.txt 檔案,允許或禁止檢索個別網頁或整個網站。

檢索偏好設定對網站在 Google 服務中顯示位置的影響

Google 的檢索基礎架構適用於多種 Google 產品。也就是說,遵循最佳做法有助於 Google 更有效率地發掘您的網頁內容,並在 Google 上顯示。
Google 搜尋會使用 Googlebot 檢索您的網站,為使用者找出相關內容。
Gemini 系列應用程式和 Vertex AI API for Gemini 都會使用 Google-Extended。進一步瞭解 Google-Extended
針對 Storebot-Google 使用者代理程式指定的檢索偏好設定會影響所有 Google 購物平台。
AdSense 檢索器會造訪參與計畫的網站,以便提供相關廣告。
針對 Googlebot-News 使用者代理程式指定的檢索偏好設定會影響 Google 新聞產品,包括 news.google.com 和 Google 新聞應用程式。
Google NotebookLM 擷取程式會要求個別網址,這些網址是 NotebookLM 使用者為專案提供的來源。