Google ka bërë të mundur parandalimin e zvarritjes së faqes nga robotët që përdoren për të trajnuar rrjetet nervore të kompanisë.
Ju mund të fshehni përmbajtjen e faqes nga robotët rapsod и VertexAI, dhe një ndalim i tillë nuk do të ndikojë në indeksimin e faqes nga vetë motori i kërkimit. Për ta bërë këtë, duhet të shtoni një hyrje përkatëse në robots.txt.
Ndërsa baza e modeleve të AI zgjerohet, Google planifikon të zgjerojë automatikisht aftësinë për të parandaluar që këto AI të indeksojnë një faqe.
Burimi: linux.org.ru