Боты обучающие ИИ обрушили трафик крупнейшей онлайн-энциклопедии

Искусственный интеллект жадно поглощает информацию, но кто за это платит? «Википедия» столкнулась с огромной нагрузкой на серверы из-за ботов, скачивающих данные для обучения нейросетей. Трафик вырос в разы, вынуждая фонд Wikimedia искать способы защиты своих ресурсов.

Боты обучающие ИИ обрушили трафик крупнейшей онлайн-энциклопедии

С тех пор как искусственный интеллект стал активно обучаться на материалах сети, «Википедия» оказалась в эпицентре этой цифровой гонки. Боты, разработанные для сбора данных, заполонили серверы крупнейшей онлайн-энциклопедии, скачивая статьи и изображения в невероятных объемах. За последние три месяца трафик, сгенерированный такими программами, вырос на 50 %, а нагрузка на инфраструктуру фонда Wikimedia достигла беспрецедентных значений.

По словам представителей Wikimedia, автоматизированные запросы поступают в геометрической прогрессии, причем большая часть ресурсов уходит на загрузку мультимедийного контента с открытой лицензией. Это не только увеличивает расходы, но и ставит под угрозу стабильность работы сайта. Хотя инфраструктура «Википедии» изначально проектировалась для выдерживания пиковых нагрузок во время крупных событий, количество запросов от ботов оказалось слишком высоким.

Особенно боты активны в сборе информации из менее популярных статей, которые обычно получают минимальное количество просмотров от реальных пользователей. Аналитики фонда отмечают, что боты составляют около 65 % от подобного трафика, что значительно превышает их долю среди обычных просмотров (примерно 35 %). Кроме того, они проникают и в критически важные внутренние системы разработчиков, такие как платформы проверки кода и баг-трекеры, создавая дополнительные проблемы.

В ответ на это «Википедия» уже начала вводить индивидуальные ограничения скорости для ИИ-ботов, а некоторые из них и вовсе были заблокированы. Однако такие меры не решают проблему в долгосрочной перспективе. Поэтому фонд Wikimedia разрабатывает стратегию «Ответственного использования инфраструктуры», которая поможет точнее идентифицировать и фильтровать автоматизированный трафик.

Подобные трудности уже возникали у других платформ. В 2023 году Reddit столкнулся с тем, что Microsoft без разрешения использовала его данные для обучения ИИ. Это привело к резкому ужесточению политики и введению платного доступа к API, что вызвало протесты пользователей и разработчиков. Теперь «Википедии» предстоит найти баланс между открытостью знаний и защитой своих ресурсов от неограниченного использования со стороны ИИ.

Читайте также

Российские ученые создали нанокаркас для двойной атаки на раковые клетки

Российские ученые создали нанокаркас для двойной атаки на раковые клетки

ИИ обнаружил 33 новых материала MXene в научных архивах 1970-х годов

ИИ обнаружил 33 новых материала MXene в научных архивах 1970-х годов

Nvidia выпустила открытую ИИ-модель для транскрибации аудио на 40 языках

Nvidia выпустила открытую ИИ-модель для транскрибации аудио на 40 языках

Полиэтилен низкого давления изменит судостроение

Полиэтилен низкого давления изменит судостроение

Разведка США показала секретный космоплан Китая «Шэньлун» рядом с неизвестным спутником

Разведка США показала секретный космоплан Китая «Шэньлун» рядом с неизвестным спутником

В МИСИС усовершенствовали магнитные датчики для поиска микротрещин в зданиях

В МИСИС усовершенствовали магнитные датчики для поиска микротрещин в зданиях

Российские ученые создали вихревой очиститель воздуха с эффективностью почти 100%

Российские ученые создали вихревой очиститель воздуха с эффективностью почти 100%

Робот-насекомое отскакивает от стен и не боится мухобоек

Робот-насекомое отскакивает от стен и не боится мухобоек

Что происходит с физикой, когда вы прыгаете в вагоне поезда?

Что происходит с физикой, когда вы прыгаете в вагоне поезда?

Комета Галлея возвращается: почему её появление в 1986 году разочаровало миллионы людей и чего ждать в 2061-м

Комета Галлея возвращается: почему её появление в 1986 году разочаровало миллионы людей и чего ждать в 2061-м

«Черный ящик»: как устроен главный свидетель авиакатастроф и почему его нельзя заменить облаком

«Черный ящик»: как устроен главный свидетель авиакатастроф и почему его нельзя заменить облаком

Почему электромобилям не нужна коробка передач — и зачем Porsche все-таки ее использует?

Почему электромобилям не нужна коробка передач — и зачем Porsche все-таки ее использует?

Кожура овощей и фруктов содержит больше клетчатки, чем мякоть

Кожура овощей и фруктов содержит больше клетчатки, чем мякоть

Учёные нашли в уравнениях Эйнштейна новый механизм высвобождения энергии

Учёные нашли в уравнениях Эйнштейна новый механизм высвобождения энергии

Поддельные эмуляторы PS5 на GitHub заражают компьютеры вирусом для кражи паролей

Поддельные эмуляторы PS5 на GitHub заражают компьютеры вирусом для кражи паролей

Астрономы обнаружили две «планеты-зомби» возле мёртвой звезды в 1600 световых годах от Земли

Астрономы обнаружили две «планеты-зомби» возле мёртвой звезды в 1600 световых годах от Земли