Многие программисты уже открыто называют ИИ-ботов, сканирующих интернет, «тараканами сети». Они не просто собирают данные, а буквально атакуют сайты, доводя их до сбоев. Особенно сильно страдают разработчики ПО с открытым исходным кодом (FOSS), ведь их проекты обычно размещены на публичных платформах и не имеют ресурсов, чтобы защищаться, как коммерческие компании.
Проблема в том, что большинство ИИ-сканеров игнорируют стандартный файл robots.txt, который говорит ботам, какие страницы не стоит индексировать. В результате сервера перегружаются, а некоторые разработчики даже вынуждены блокировать целые страны, чтобы защититься.
Но есть и более креативные решения. Разработчик Xe Iaso создал инструмент Anubis, который проверяет, является ли посетитель человеком, прежде чем разрешить доступ. Если тест не пройден – бот отправляется в небытие. Интересно, что название не случайно: Анубис в древнеегипетской мифологии взвешивал души, решая, достойны ли они загробной жизни.
Другие программисты пошли ещё дальше – они решили мстить ботам. Инструмент Nepenthes заманивает краулеров в бесконечный лабиринт фейковых страниц, бесполезных для ИИ. Cloudflare тоже подключилась, запустив AI Labyrinth, который запутывает ботов, кормя их бесполезными данными вместо настоящего контента.
Прекратите поддерживать ИИ-системы, которые воруют наш труд. Перестаньте использовать их, говорить о них и создавать новые.
Но пока ситуация не меняется, программисты FOSS вынуждены изобретать всё более хитрые способы борьбы с навязчивыми ботами – и порой с юмором, который ИИ вряд ли сможет оценить.
