Google представила новый инструмент: с его помощью сайты смогут запрещать обучать ИИ на своих данных



Google-Extended можно настроить через документ robots.txt — он показывает веб-сканерам, к какой информации они могут получить доступ.



Так, владельцы сайтов смогут скрыть свои ресурсы от роботов, собирающих данные для обучения ИИ-моделей Bard и VertexAI. При этом сайты продолжат индексироваться поисковиком Google.



Точно так же в августе поступила OpenAI: компания позволила сайтам закрыть индексацию от ChatGPT через файл Robots.txt.