Google ha hecho posible impedir el rastreo de sitios por parte de los robots utilizados para entrenar las redes neuronales de la empresa.
Puede ocultar el contenido del sitio a los robots Bardo и Vértice AI, y dicha prohibición no afectará la indexación del sitio por parte del propio motor de búsqueda. Para hacer esto, debe agregar la entrada correspondiente en robots.txt.
A medida que se expande la base de modelos de IA, Google planea ampliar automáticamente la capacidad de evitar que estas IA indexen un sitio.
Fuente: linux.org.ru