گوگل عملکردی را برای جلوگیری از خزیدن ربات های شبکه عصبی در سایت ها پیاده سازی کرده است

گوگل این امکان را فراهم کرده است که از خزیدن سایت توسط روبات هایی که برای آموزش شبکه های عصبی این شرکت استفاده می شوند، جلوگیری کند.

می توانید محتوای سایت را از روبات ها پنهان کنید شاعر и VertexAI، و چنین ممنوعیتی تأثیری بر ایندکس شدن سایت توسط خود موتور جستجو نخواهد داشت. برای انجام این کار، باید یک ورودی مربوطه را به robots.txt اضافه کنید.

با گسترش پایه مدل های هوش مصنوعی، گوگل قصد دارد به طور خودکار توانایی جلوگیری از ایندکس کردن سایت توسط این هوش مصنوعی ها را گسترش دهد.

منبع: linux.org.ru