Google wdrożyło funkcję zakazu skanowania stron przez roboty sieci neuronowych
Firma Google dała możliwość zakazania skanowania strony przez roboty wykorzystywane do uczenia się sieci neuronowych firmy. Treść strony można ukryć przed robotami Bard i VertexAI, przy czym taki zakaz nie wpłynie na indeksowanie strony przez wyszukiwarkę. Aby to zrobić, należy dodać odpowiedni wpis do robots.txt. Wraz z rozwojem bazy modeli AI Google planuje automatyczne rozszerzenie możliwości zakazu indeksacji strony […]
