Летом 2023 года компания OpenAI, разработчик одной из лучших текстовых нейросетей ChatGPT, запустила поискового робота для анализа контента на веб-сайтах. Бот просматривает и анализирует сайты в поисках контента для обучения ИИ-моделей.
Владельцы сайтов могут закрыть страницы для бота. Для этого надо просто дописать несколько строк в файл robots.txt.
В Роскомнадзоре решили, что запретить бота лучше вообще, и разослали соответствующие письма хостинг-провайдерам.
В ведомстве считают, что за сбором данных для обучения нейросети может скрываться поиск информации о критических уязвимостях ресурсов. В случае запрета деятельности подобных алгоритмов бизнесу придется прибегать к другим методам сбора актуальных данных, например, через маскировку своих ботов.
ИЛЛЮСТРАЦИЯ: Kandinsky by Sber AI