Новый инструмент будет помечать тексты сгенерированные ИИ

Google открыла для свободного использования код инструмента SynthID Text, который служит простой цели — устанавливать "водяные знаки" при генерации ответов нейросетями.

Новый инструмент будет помечать тексты сгенерированные ИИ

Google открывает доступ к своей технологии SynthID Text, которая помогает добавлять водяные знаки в тексты, созданные генеративными моделями ИИ, и выявлять такие тексты. Теперь этот инструмент можно скачать через платформу Hugging Face и обновлённый набор инструментов Responsible GenAI Toolkit от Google.

В своём посте на X компания сообщила:

Мы открыли исходный код SynthID Text. Он доступен бесплатно для разработчиков и компаний, чтобы они могли определять контент, созданный ИИ.
Google

Как же работает эта технология?

Когда ИИ генерирует текст, он предсказывает следующее слово или символ, называемое токеном, с определённой вероятностью. SynthID Text встраивает дополнительную информацию в этот процесс, меняя вероятность появления тех или иных токенов. Эти изменения формируют своеобразный водяной знак, который затем можно сравнить с ожидаемым шаблоном и определить, был ли текст создан ИИ.

Google утверждает, что внедрение SynthID Text в модели Gemini не ухудшает качество или скорость генерации и сохраняет работоспособность даже с текстом, который был обрезан или изменён.

Однако компания признаёт, что у метода есть ограничения. Например, он не так эффективно работает с короткими текстами, переводами или ответами на фактические вопросы вроде «Какая столица Франции?». Это связано с тем, что в таких случаях мало возможностей корректировать вероятности токенов без ущерба для точности.

Google не единственная компания, разрабатывающая технологию водяных знаков для ИИ-текста. OpenAI тоже изучает этот вопрос, хотя пока не выпустила свои решения из-за технических и коммерческих сложностей.

Если такие технологии водяных знаков получат широкое распространение, они могли бы помочь в борьбе с неточными ИИ-детекторами, которые иногда ошибочно помечают обычные тексты как сгенерированные ИИ. Однако вопрос в том, смогут ли стандарты, предложенные одной компанией, победить конкурентов.

В некоторых странах уже предпринимаются меры для внедрения подобных технологий. Например, в Китае водяные знаки для ИИ-контента обязательны, и штат Калифорния планирует принять аналогичные законы.

Необходимость регулирования становится всё более актуальной. По данным Европейского агентства по обеспечению законов, к 2026 году 90% онлайн-контента может быть создано искусственно, что создаёт серьёзные вызовы для борьбы с дезинформацией и мошенничеством. Уже сейчас, по данным исследования AWS, почти 60% онлайн-предложений могут быть сгенерированы ИИ, благодаря активному использованию ИИ для перевода контента.

Читайте также

Kawasaki оснастит человекоподобного робота Kaleido физическим ИИ для работы на заводах

Kawasaki оснастит человекоподобного робота Kaleido физическим ИИ для работы на заводах

В Германии создают строительных роботов, способных собирать здания почти без участия человека

В Германии создают строительных роботов, способных собирать здания почти без участия человека

Видеоаналитика на базе ИИ позволила найти 250 детей в Новосибирской области

Видеоаналитика на базе ИИ позволила найти 250 детей в Новосибирской области

Ученые МИСИС создали пористые гранулы для костей с защитой от инфекций

Ученые МИСИС создали пористые гранулы для костей с защитой от инфекций

В Казахстане кошек с камерами и ИИ отправили искать пропавших питомцев

В Казахстане кошек с камерами и ИИ отправили искать пропавших питомцев

Ученые выяснили, насколько Германия была близка к запуску ядерного реактора B8 во время Второй мировой войны

Ученые выяснили, насколько Германия была близка к запуску ядерного реактора B8 во время Второй мировой войны

Ученые МФТИ создали нейросеть по принципу мозжечка

Ученые МФТИ создали нейросеть по принципу мозжечка

Физики создали почти идентичные фотоны для будущих квантовых сетей

Физики создали почти идентичные фотоны для будущих квантовых сетей

Из лабораторий — на работу: 7 компаний, создающих человекоподобных роботов для реального мира

Из лабораторий — на работу: 7 компаний, создающих человекоподобных роботов для реального мира

Почему роботы умеют делать сальто, но до сих пор не могут нормально сложить рубашку

Почему роботы умеют делать сальто, но до сих пор не могут нормально сложить рубашку

Почему невозможно создать абсолютно точную карту Земли, Луны или Марса?

Почему невозможно создать абсолютно точную карту Земли, Луны или Марса?

Первый складной iPhone не стал революцией: с чем придется мириться владельцам iPhone Duo

Первый складной iPhone не стал революцией: с чем придется мириться владельцам iPhone Duo

Ритм дыхания действительно влияет на принятие решений

Ритм дыхания действительно влияет на принятие решений

Гибрид LADA Azimut получит отечественную батарею

Гибрид LADA Azimut получит отечественную батарею

Не только чума: семь самых смертоносных эпидемий и пандемий в истории человечества

Не только чума: семь самых смертоносных эпидемий и пандемий в истории человечества

Звезда в трехстах световых годах неспешно поглощает коричневого карлика

Звезда в трехстах световых годах неспешно поглощает коричневого карлика