Kompania Google ka mundësuar ndalimin e skanimit të siteve nga robotët që përdoren për të trajnuar inteligjencën artificiale të kompanisë.
Mund të fshihet përmbajtja e siteve nga robotët. Bard dhe VertexAI, ndërsa ky ndalim nuk do të përshtatet me indeksimin e siteve nga vetë motorët e kërkimit. Për këtë, është e nevojshme të shtoni një shënim përkatës në robots.txt.
Me zgjerimin e bazës së modeleve të AI, Google planifikon automatikisht të zgjasë dhe mundësinë e ndalimit të indeksimit të siteve nga këta AI.
Burimi: linux.org.ru
