گوگل نے کمپنی کے نیورل نیٹ ورکس کو تربیت دینے کے لیے استعمال ہونے والے روبوٹس کے ذریعے سائٹ کرالنگ کو روکنا ممکن بنایا ہے۔
آپ روبوٹ سے سائٹ کا مواد چھپا سکتے ہیں۔ بارڈ и VertexAI، اور اس طرح کی پابندی خود سرچ انجن کے ذریعہ سائٹ کی انڈیکسنگ کو متاثر نہیں کرے گی۔ ایسا کرنے کے لیے، آپ کو robots.txt پر متعلقہ اندراج شامل کرنے کی ضرورت ہے۔
جیسے جیسے AI ماڈلز کی بنیاد پھیلتی ہے، گوگل خود بخود ان AIs کو کسی سائٹ کو انڈیکس کرنے سے روکنے کی صلاحیت کو بڑھانے کا ارادہ رکھتا ہے۔
ماخذ: linux.org.ru