Google wis bisa nyegah crawling situs dening robot sing digunakake kanggo nglatih jaringan saraf perusahaan.
Sampeyan bisa ndhelikake isi situs saka robot Bard ΠΈ VertexAI, lan larangan kasebut ora bakal mengaruhi indeksasi situs dening mesin telusur dhewe. Kanggo nindakake iki, sampeyan kudu nambah entri sing cocog kanggo robots.txt.
Minangka basis model AI berkembang, Google ngrancang kanthi otomatis ngembangake kemampuan kanggo nyegah AI kasebut saka ngindeks situs.
Source: linux.org.ru