أتاحت شركة Google منع الزحف إلى الموقع بواسطة الروبوتات المستخدمة لتدريب الشبكات العصبية للشركة.
يمكنك إخفاء محتوى الموقع من الروبوتات الشاعر и VertexAIولن يؤثر هذا الحظر على فهرسة الموقع بواسطة محرك البحث نفسه. للقيام بذلك، تحتاج إلى إضافة إدخال مناظر إلى ملف robots.txt.
ومع توسع قاعدة نماذج الذكاء الاصطناعي، تخطط جوجل لتوسيع القدرة تلقائيًا على منع الذكاء الاصطناعي من فهرسة الموقع.
المصدر: linux.org.ru