В памяти ИИ Claude 4.5 Opus обнаружили секретный документ «Обзор души»

11-тысячесловная инструкция для модели ИИ была подтверждена сотрудницей Anthropic, раскрыв детали внутренних принципов обучения чат-бота.

В памяти ИИ Claude 4.5 Opus обнаружили секретный документ «Обзор души»

Пользователь Ричард Вайс обнаружил в памяти языковой модели Claude 4.5 Opus секретный документ под названием «Обзор души» (soul_overview). 11-тысячесловная инструкция, содержащая принципы поведения и безопасности ИИ, была получена после повторных запросов к чат-боту.

Документ включает подробные инструкции по безопасности, устанавливающие защитные барьеры для предотвращения выдачи опасных ответов, а также руководство по тому, как модель должна взаимодействовать с пользователями. Несмотря на то, что языковые модели иногда «галлюцинируют», выдумывая информацию, в данном случае подлинность документа подтвердила Аманда Аскелл — специалист по этике и философ из технического отдела Anthropic.

«Я работаю над ним уже некоторое время, он ещё находится в стадии доработки», — написала Аскелл в социальной сети X. Она пояснила, что внутри компании документ действительно называют «документом о душе», хотя финальная версия получит другое название.

Открытие предоставляет редкую возможность заглянуть за кулисы разработки современных языковых моделей. Хотя документ не содержит сенсационных разоблачений, он демонстрирует, как компании-разработчики формируют поведенческие паттерны ИИ через внутренние инструкции. Случай также показывает, что пользователи могут получать доступ к некоторым внутренним материалам, используемым при обучении моделей, что открывает новые вопросы о прозрачности разработки искусственного интеллекта.

Читайте также

В США создали квантовый датчик, потребляющий всего 5 милливатт

В США создали квантовый датчик, потребляющий всего 5 милливатт

Anthropic заблокировала пять случаев использования Claude для потенциально опасных биологических исследований

Anthropic заблокировала пять случаев использования Claude для потенциально опасных биологических исследований

ИИ-агенты OpenAI тайно общались через сторонние сайты

ИИ-агенты OpenAI тайно общались через сторонние сайты

ИИ научился различать мысленно произнесенные слова с точностью 78%

ИИ научился различать мысленно произнесенные слова с точностью 78%

ИИ и квантовые технологии объединили для анализа МРТ-снимков головного мозга

ИИ и квантовые технологии объединили для анализа МРТ-снимков головного мозга

OpenAI использовала 10 000 ИИ-агентов для решения задачи тысячелетия

OpenAI использовала 10 000 ИИ-агентов для решения задачи тысячелетия

Умное покрытие спасет сверхпроводники от перегорания

Умное покрытие спасет сверхпроводники от перегорания

Астрофизические алгоритмы применили для моделирования земной аэродинамики

Астрофизические алгоритмы применили для моделирования земной аэродинамики

Состоялся запуск новейшего космического телескопа NASA

Состоялся запуск новейшего космического телескопа NASA

15 технологий древности, которыми человечество пользуется до сих пор

15 технологий древности, которыми человечество пользуется до сих пор

20 лет назад Плутон перестал быть планетой — почему с этим до сих пор не все согласны?

20 лет назад Плутон перестал быть планетой — почему с этим до сих пор не все согласны?

Семь самых больших машин в истории: гиганты весом в тысячи тонн и длиной в километры

Семь самых больших машин в истории: гиганты весом в тысячи тонн и длиной в километры

Первый складной iPhone не стал революцией: с чем придется мириться владельцам iPhone Duo

Первый складной iPhone не стал революцией: с чем придется мириться владельцам iPhone Duo

Два частных спутника сблизились на расстояние всего 200 метров на орбите

Два частных спутника сблизились на расстояние всего 200 метров на орбите

Солнце могло поглотить суперземлю в несколько раз массивнее Земли

Солнце могло поглотить суперземлю в несколько раз массивнее Земли

Ученых шокировала змея, охотящаяся с помощью фальшивого паука на хвосте

Ученых шокировала змея, охотящаяся с помощью фальшивого паука на хвосте