Google 使用者觸發的擷取程式清單
使用者觸發的擷取程式是由使用者啟動,用來執行 Google 產品中的擷取函式。舉例來說,Google 網站驗證工具會回應使用者的要求,或是在 Google Cloud (GCP) 上託管的網站,提供可讓網站使用者擷取外部 RSS 動態消息的功能。由於擷取動作是由使用者提出要求,因此擷取程式通常會忽略 robots.txt 規則。Google 檢索器的一般技術性資源也適用於使用者觸發的擷取程式。
使用者觸發的擷取器使用的 IP 範圍會發布到 user-triggered-fetchers.json 和 user-triggered-fetchers-google.json 物件。使用者觸發的擷取程式反向 DNS 遮罩會根據擷取程式的擁有者是 Google 或使用者,分別比對 ***-***-***-***.gae.googleusercontent.com
或 google-proxy-***-***-***-***.google.com
。
下列清單列出使用者觸發的擷取程式、擷取程式出現在 HTTP 要求時的使用者代理程式字串,以及擷取程式所關聯的產品。這份清單僅列舉部分擷取程式,內容僅涵蓋記錄檔中較有可能出現的要求者,以及我們收到問題的檢索器。
Feedfetcher
-
HTTP 要求中的使用者代理程式 FeedFetcher-Google; (+http://www.google.com/feedfetcher.html)
相關產品 Feedfetcher 可用於檢索 Google 新聞和 PubSubHubbub 的 RSS 或 Atom 動態消息。 Google 新聞發布者中心
-
HTTP 要求中的使用者代理程式 GoogleProducer; (+https://developers.google.com/search/docs/crawling-indexing/google-producer)
相關產品 Google Publisher Center 會擷取並處理發布商明確提供的動態消息,以便在 Google 新聞到達網頁中使用。 Google 朗讀
-
HTTP 要求中的使用者代理程式 行動裝置版代理程式 Mozilla/5.0 (Linux; Android 7.0; SM-G930V Build/NRD90M) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.125 Mobile Safari/537.36 (compatible; Google-Read-Aloud; +https://support.google.com/webmasters/answer/1061943)
電腦版代理程式 Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.118 Safari/537.36 (compatible; Google-Read-Aloud; +https://support.google.com/webmasters/answer/1061943)
舊版代理程式 (已淘汰) google-speakr
相關產品 使用者提出要求時,Google 朗讀服務會使用文字轉語音 (TTS) 功能擷取並朗讀網頁。 Google 網站驗證工具
-
HTTP 要求中的使用者代理程式 Mozilla/5.0 (compatible; Google-Site-Verification/1.0)
相關產品 Google 網站驗證工具會擷取 Search Console 驗證權杖。