Боты обучающие ИИ обрушили трафик крупнейшей онлайн-энциклопедии

Искусственный интеллект жадно поглощает информацию, но кто за это платит? «Википедия» столкнулась с огромной нагрузкой на серверы из-за ботов, скачивающих данные для обучения нейросетей. Трафик вырос в разы, вынуждая фонд Wikimedia искать способы защиты своих ресурсов.

Боты обучающие ИИ обрушили трафик крупнейшей онлайн-энциклопедии

С тех пор как искусственный интеллект стал активно обучаться на материалах сети, «Википедия» оказалась в эпицентре этой цифровой гонки. Боты, разработанные для сбора данных, заполонили серверы крупнейшей онлайн-энциклопедии, скачивая статьи и изображения в невероятных объемах. За последние три месяца трафик, сгенерированный такими программами, вырос на 50 %, а нагрузка на инфраструктуру фонда Wikimedia достигла беспрецедентных значений.

По словам представителей Wikimedia, автоматизированные запросы поступают в геометрической прогрессии, причем большая часть ресурсов уходит на загрузку мультимедийного контента с открытой лицензией. Это не только увеличивает расходы, но и ставит под угрозу стабильность работы сайта. Хотя инфраструктура «Википедии» изначально проектировалась для выдерживания пиковых нагрузок во время крупных событий, количество запросов от ботов оказалось слишком высоким.

Особенно боты активны в сборе информации из менее популярных статей, которые обычно получают минимальное количество просмотров от реальных пользователей. Аналитики фонда отмечают, что боты составляют около 65 % от подобного трафика, что значительно превышает их долю среди обычных просмотров (примерно 35 %). Кроме того, они проникают и в критически важные внутренние системы разработчиков, такие как платформы проверки кода и баг-трекеры, создавая дополнительные проблемы.

В ответ на это «Википедия» уже начала вводить индивидуальные ограничения скорости для ИИ-ботов, а некоторые из них и вовсе были заблокированы. Однако такие меры не решают проблему в долгосрочной перспективе. Поэтому фонд Wikimedia разрабатывает стратегию «Ответственного использования инфраструктуры», которая поможет точнее идентифицировать и фильтровать автоматизированный трафик.

Подобные трудности уже возникали у других платформ. В 2023 году Reddit столкнулся с тем, что Microsoft без разрешения использовала его данные для обучения ИИ. Это привело к резкому ужесточению политики и введению платного доступа к API, что вызвало протесты пользователей и разработчиков. Теперь «Википедии» предстоит найти баланс между открытостью знаний и защитой своих ресурсов от неограниченного использования со стороны ИИ.

Читайте также

Гипоаллергенные собаки стали реальностью благодаря генной модификации

Гипоаллергенные собаки стали реальностью благодаря генной модификации

Создается искусственный интеллект для обнаружения утечек газа

Создается искусственный интеллект для обнаружения утечек газа

Ученые России и Китая создают «прививку» для растений, заменяющую тонны химикатов

Ученые России и Китая создают «прививку» для растений, заменяющую тонны химикатов

Гибридный ИК-сенсор работает как тепловизор и фотоприемник одновременно

Гибридный ИК-сенсор работает как тепловизор и фотоприемник одновременно

Китайский исследователь с помощью ChatGPT решил математическую задачу, над которой бились более 20 лет

Китайский исследователь с помощью ChatGPT решил математическую задачу, над которой бились более 20 лет

Мужчина спрятал инструкции для ИИ в судебных документах и получил запрет на электронную подачу

Мужчина спрятал инструкции для ИИ в судебных документах и получил запрет на электронную подачу

США и Япония хотят добывать редкоземельные металлы на глубине 6 км

США и Япония хотят добывать редкоземельные металлы на глубине 6 км

В России создали искусственное ухо с помощью гибридной 3D-биопечати

В России создали искусственное ухо с помощью гибридной 3D-биопечати

Медицинские технологии, в которые почти невозможно поверить

Медицинские технологии, в которые почти невозможно поверить

Квантовый двигатель нарушает законы термодинамики, генерируя работу и холод одновременно

Квантовый двигатель нарушает законы термодинамики, генерируя работу и холод одновременно

Как РЛС Вадима Мацкевича решила исход Корейской войны

Как РЛС Вадима Мацкевича решила исход Корейской войны

ИИ в джунглях: как в Коста-Рике тестируют сообразительность диких обезьян

ИИ в джунглях: как в Коста-Рике тестируют сообразительность диких обезьян

Физики РАН указали на ошибку в исследованиях гибридных сверхпроводников

Физики РАН указали на ошибку в исследованиях гибридных сверхпроводников

Китайские ученые создали сверхчувствительный магнитный датчик размером с клетку кожи

Китайские ученые создали сверхчувствительный магнитный датчик размером с клетку кожи

Ученые опровергли миф о том, что арбуз – это ягода

Ученые опровергли миф о том, что арбуз – это ягода

Астрономы нашли самые убедительные доказательства того, что вакуум способен изменять свет

Астрономы нашли самые убедительные доказательства того, что вакуум способен изменять свет