Google ha hecho posible evitar el rastreo de un sitio web por parte de robots utilizados para entrenar las redes neuronales de la empresa.
Puede ocultar el contenido del sitio web a los robots. Bardo и Vértice AI, pero esta prohibición no afectará la indexación del sitio por parte del motor de búsqueda. Para ello, debe agregar la entrada correspondiente a robots.txt.
A medida que se expande su base de modelos de IA, Google planea ampliar automáticamente la capacidad de evitar que estas IA indexen un sitio.
Fuente: linux.org.ru
