Gihimo kini sa Google nga posible nga mapugngan ang pag-crawl sa site sa mga robot nga gigamit sa pagbansay sa mga neural network sa kompanya.
Mahimo nimong itago ang sulud sa site gikan sa mga robot Bard ΠΈ VertexAI, ug ang ingon nga pagdili dili makaapekto sa pag-indeks sa site pinaagi sa search engine mismo. Aron mahimo kini, kinahanglan nimong idugang ang katugbang nga entry sa robots.txt.
Samtang nagkalapad ang sukaranan sa mga modelo sa AI, nagplano ang Google nga awtomatiko nga mapalapad ang katakus aron mapugngan kini nga mga AI gikan sa pag-indeks sa usa ka site.
Source: linux.org.ru