谷歌已經實現了阻止神經網路機器人抓取網站的功能

谷歌已經可以阻止用於訓練該公司神經網路的機器人進行網站爬行。

您可以對機器人隱藏網站內容 詩人 и 頂點人工智慧，而且這樣的禁令不會影響搜尋引擎本身對該網站的索引。 為此，您需要向 robots.txt 添加相應的條目。

隨著人工智慧模型基礎的擴展，Google計劃自動擴展阻止這些人工智慧對網站進行索引的能力。

來源： linux.org.ru