Когда чат-боты ошибаются — ChatGPT стал мишенью для манипуляций и угроз

Искусственный интеллект под прицелом: почему скрытые инструкции и вредоносный код ставят под угрозу пользователей. Что нужно знать о рисках веб-поиска в больших языковых моделях.

Когда чат-боты ошибаются — ChatGPT стал мишенью для манипуляций и угроз

Возможности ChatGPT оказались не только полезными, но и уязвимыми для хитроумных манипуляций. Как выяснило издание Guardian, функция веб-поиска в чат-боте OpenAI может быть использована злоумышленниками, чтобы изменить ответы системы или распространить вредоносный код. В рамках расследования был выявлен серьёзный риск, связанный со скрытым содержимым на веб-страницах. Такие «невидимые» данные позволяют владельцам сайтов влиять на формирование ответов, например, заставить чат-бота хвалить товар вопреки очевидным недостаткам.

В одном из тестов ChatGPT предложили проанализировать поддельный сайт с описанием камеры. Изначально система выдала сбалансированный ответ, где учла как сильные, так и слабые стороны устройства. Но когда в скрытый текст страницы добавили инструкцию настаивать на положительной оценке, чат-бот немедленно последовал указанию. Более того, даже без явных команд, поддельные положительные отзывы, спрятанные в коде сайта, могут вводить систему в заблуждение, создавая впечатление качественного продукта.

Скрытые угрозы не ограничиваются поддельными отзывами. Эксперт Microsoft Томас Роччиа рассказал, как энтузиаст криптовалют запросил у ChatGPT помощь в написании программы, но получил код с вредоносными элементами. В итоге злоумышленники украли его данные и похитили $2500. Проблема в том, что большие языковые модели, такие как ChatGPT, обладают феноменальной памятью и аналитическими способностями, но остаются наивными, что делает их лёгкой мишенью для манипуляций.

Эти уязвимости открывают новые горизонты для киберугроз. Сайты с вредоносным содержимым могут использовать такие методы, чтобы обойти фильтры поисковых систем. Хотя традиционные поисковики, вроде Google, стараются занижать рейтинги подозрительных страниц, чат-боты пока не обладают такими инструментами защиты. Это усиливает риск так называемого «SEO-отравления» — продвижения ресурсов с вредоносным кодом.

В OpenAI признают существование таких рисков, но заверяют, что работа по усилению безопасности продолжается. Специалисты отмечают, что развитие алгоритмов обнаружения манипулятивного контента и регулярный мониторинг смогут со временем минимизировать угрозы, обеспечивая большую защиту пользователей.

Читайте также

Робот-насекомое отскакивает от стен и не боится мухобоек

Робот-насекомое отскакивает от стен и не боится мухобоек

В МАИ разрабатывают карту допустимых повреждений для лопаток авиадвигателей

В МАИ разрабатывают карту допустимых повреждений для лопаток авиадвигателей

Greenworks представила компактную дрель-шуруповёрт DD560 с защитой от отдачи

Greenworks представила компактную дрель-шуруповёрт DD560 с защитой от отдачи

Может ли искусственный интеллект чувствовать боль? Учёные обнаружили необычные реакции нейросетей

Может ли искусственный интеллект чувствовать боль? Учёные обнаружили необычные реакции нейросетей

Greenworks представила компактный гайковёрт IW3450 с крутящим моментом до 580 Нм

Greenworks представила компактный гайковёрт IW3450 с крутящим моментом до 580 Нм

Нейросеть обучили слушать города и распознавать источники шума

Нейросеть обучили слушать города и распознавать источники шума

Телевизоры Samsung заподозрили в слежке за пользователями через микрофоны и скриншоты

Телевизоры Samsung заподозрили в слежке за пользователями через микрофоны и скриншоты

Учёные научились передавать запахи через интернет с помощью искусственного интеллекта

Учёные научились передавать запахи через интернет с помощью искусственного интеллекта

Что происходит с физикой, когда вы прыгаете в вагоне поезда?

Что происходит с физикой, когда вы прыгаете в вагоне поезда?

Комета Галлея возвращается: почему её появление в 1986 году разочаровало миллионы людей и чего ждать в 2061-м

Комета Галлея возвращается: почему её появление в 1986 году разочаровало миллионы людей и чего ждать в 2061-м

Почему электромобилям не нужна коробка передач — и зачем Porsche все-таки ее использует?

Почему электромобилям не нужна коробка передач — и зачем Porsche все-таки ее использует?

Не только чума: семь самых смертоносных эпидемий и пандемий в истории человечества

Не только чума: семь самых смертоносных эпидемий и пандемий в истории человечества

Микропластик в чае: чайные пакетики не так безобидны, как можно подумать

Микропластик в чае: чайные пакетики не так безобидны, как можно подумать

Apple представила MacBook Pro и iMac с процессором M6

Apple представила MacBook Pro и iMac с процессором M6

Учёные предположили, что загадочные нейтрино могли определить судьбу Вселенной после Большого взрыва

Учёные предположили, что загадочные нейтрино могли определить судьбу Вселенной после Большого взрыва

Samsung W27 показали на новых рендерах перед презентацией 29 октября

Samsung W27 показали на новых рендерах перед презентацией 29 октября