ИИ-боты замедляют работу сайтов по всему интернету

Платформа SourceHut, предоставляющая Git-хостинг для открытых проектов, заявила о замедлении работы из-за активности веб-сканеров, используемых компаниями, разрабатывающими системы искусственного интеллекта. Подобные жалобы становятся все более распространенными среди владельцев онлайн-ресурсов.

Для ограничения трафика от ИИ-ботов, SourceHut внедрила Nepenthes – инструмент для защиты от недобросовестных сканеров, собирающих данные для обучения ИИ. Платформа полностью заблокировала диапазоны IP-адресов нескольких облачных провайдеров, включая Google Cloud и Microsoft Azure, из-за чрезмерного трафика от их ботов.

Пользователям добросовестных сервисов, размещенных на этих инфраструктурах, предложили связаться с администрацией SourceHut для добавления в список исключений. До этого, в 2022 году, SourceHut сталкивалась с проблемой частых обращений от Google Go Module Mirror.

В 2023 году OpenAI пообещала, что ее боты будут соблюдать директивы robots.txt, устанавливающие правила для веб-сканеров. Аналогичные обязательства взяли на себя и другие разработчики ИИ, однако жалобы на злоупотребления не прекратились.

Летом прошлого года сайт iFixit подвергся атаке бота Anthropic Claudebot. В декабре Vercel сообщил о значительном объеме трафика от ИИ-сканеров: OpenAI GPTbot отправил 569 млн запросов, Anthropic Claude – 370 млн.

Ранее мы писали, что киберпреступники используют Deepseek AI для распространения банковского трояна. Также Windows 11 научится давать персональные советы пользователям.