Google umožnil zabrániť prehľadávaniu stránok robotmi používanými na trénovanie neurónových sietí spoločnosti.
Obsah stránky môžete pred robotmi skryť Bard и VertexAIa takýto zákaz nebude mať vplyv na indexovanie stránky samotným vyhľadávačom. Ak to chcete urobiť, musíte pridať zodpovedajúci záznam do súboru robots.txt.
Keď sa základňa modelov AI rozšíri, Google plánuje automaticky rozšíriť schopnosť zabrániť týmto AI v indexovaní stránky.
Zdroj: linux.org.ru