Google kompaniyaning neyron tarmoqlarini o‘rgatishda foydalaniladigan robotlar tomonidan saytlarni skanerlashning oldini olishga imkon yaratdi.
Sayt tarkibini robotlardan yashirishingiz mumkin Bard и VertexAI, va bunday taqiq qidiruv tizimining o'zi tomonidan saytni indekslashga ta'sir qilmaydi. Buning uchun robots.txt ga tegishli yozuvni qo'shishingiz kerak.
AI modellari bazasi kengayib borayotganligi sababli, Google ushbu AIlarning saytni indekslashiga yo'l qo'ymaslik qobiliyatini avtomatik ravishda kengaytirishni rejalashtirmoqda.
Manba: linux.org.ru