谷歌最近更新了其穀歌擴展網絡跟踪器用戶代理文檔,反映了產品命名的變化並澄清了對搜索的影響,這可能是那些選擇阻止跟踪器的人所關心的問題。 更新後的文件提供了關於控制對用於訓練人工智慧模型的內容的存取的更清晰的指導。
谷歌擴充用戶代理
Google-Extended 於 2023 年 9 月 28 日推出,為網路發布商提供了一個使用者代理,可用於控制其網站的抓取方式。 發布者可以使用機器人選擇退出協議來允許或禁止 Google 擴展用戶代理,從而讓他們可以選擇不將其內容抓取並包含在 Google 的訓練資料集中。
谷歌將谷歌擴展描述為“獨立的產品令牌”,但這是發布商如何理解用戶代理概念的非標準術語。
最初的公告描述了新的用戶代理:
「今天我們宣布推出Google-Extended,這是一種新的控件,網路出版商可以使用它來管理其網站是否有助於改進Bard 和Vertex 的生成式AI API,包括為這些產品提供支援的未來幾代模型。
透過使用 Google-Extended 來控制對網站內容的訪問,網站管理員可以選擇是否幫助這些人工智慧模型隨著時間的推移變得更加準確和強大。”
Google 擴充功能阻止是透過「Google 擴充功能」使用者代理程式完成的:
User-agent: Google-Extended Disallow: /
Google變更日誌
Google 維護一份變更日誌,其中記錄了針對網路發布商和搜尋行銷社群的定位和溝通的重要更新。 Google 開發者頁面變更日誌宣布了 Google 擴充功能文件的變更。
此次修訂是在 Bard 更名為 Gemini Apps 後進行的,指定 Google 擴充索引現在有助於 Gemini Apps 和 Vertex AI 的產生 API。 新的措辭讓出版商放心,這不會影響谷歌搜索,解決了人們對選擇退出谷歌擴大的人工智能數據收集的潛在影響的潛在擔憂。
發生了什麼變化
Google 的變更日誌闡明,Google 擴充抓取是 Gemini Apps 獨有的,對 Google 搜尋沒有影響。
更改日誌報告:
「更新了 Google 擴充產品令牌的說明
內容:隨著名稱從 Bard 更改為 Gemini Apps,我們澄清了 Google 擴充功能會影響 Gemini Apps,並根據編輯反饋,指定 Google 擴充功能不會影響 Google 搜尋。”
更新後的指南不再使用 Bard 品牌名稱,將其更改為 Gemini。 並且加入了以下句子:
“Google 擴充功能不會影響網站在 Google 搜尋中的收錄或排名。”
閱讀更新後的 Google 追蹤器概述:
Google 抓取工具和檢索器(使用者代理程式)概述
精選圖片由 Shutterstock/Ribkhan 提供