9 月 29 日消息，隨著 OpenAI 的 ChatGPT、微軟的 Bing Chat 和谷歌 Bard 等生成式 AI 服務(wù)越來越多地用作搜索引擎的替代品，它們也遇到了一些個(gè)人和公司的抵制，這些網(wǎng)站開發(fā)者不希望他們的網(wǎng)站數(shù)據(jù)被用于 AI 模型訓(xùn)練。

今天，谷歌宣布了一種新方法，網(wǎng)站開發(fā)者可以選擇允許其 Bard 和 Vertex AI 服務(wù)訪問其內(nèi)容，或者選擇不用于訓(xùn)練這些 API 模型。

谷歌在一篇博客中宣布推出 Google-Extended，這是一種新控件，網(wǎng)站開發(fā)在可以使用它來管理其網(wǎng)站是否幫助 Bard 和 Vertex AI。

網(wǎng)站目前可以通過 robots.txt 提供拒絕被爬蟲的名單，谷歌認(rèn)為所有 AI 模型提供商也都應(yīng)該提供這種類似的透明度和控制方法。然而，隨著 AI 應(yīng)用的擴(kuò)展，網(wǎng)站將面臨大規(guī)模管理不同用途的日益復(fù)雜性。谷歌表示將盡快分享更多信息。

IT之家從谷歌支持文檔中發(fā)現(xiàn)，Google-Extended 沒有單獨(dú)的 HTTP 請(qǐng)求 user agent（UA）字符串，抓取是通過現(xiàn)有的 Google UA 字符串完成的；robots.txt user-agent token 可以用于進(jìn)行控制。

除了今天的聲明之外，谷歌還表示，它將“探索其他機(jī)器可讀的方法來為網(wǎng)站進(jìn)行選擇和控制?！彼粋€(gè)鏈接，這些網(wǎng)站可以在其中注冊郵件列表，在那里他們將收到有關(guān)谷歌改進(jìn)網(wǎng)站控制的其他更新信息。