Алгоритм МГУ выявляет скрытые ошибки в данных для обучения ИИ

В Московском государственном университете представили новый инструмент для повышения качества искусственного интеллекта. Исследователи с факультета вычислительной математики и кибернетики создали алгоритм, способный автоматически находить неточности в массивах данных, на которых обучаются нейросети. Речь идет о так называемых размеченных корпусах – огромных базах предложений, где вручную указана грамматическая структура каждой фразы. Именно от чистоты этих «учебников» зависит, насколько точно будущая модель будет понимать человеческую речь.

Алгоритм МГУ выявляет скрытые ошибки в данных для обучения ИИ

Предложенная технология действует как своего рода детектор парадоксов. Она строит собственную статистическую модель по уже размеченным данным и начинает перепроверять их работу. Если алгоритмы сталкиваются с ситуацией, когда одному предложению можно приписать несколько разных синтаксических структур, система сигнализирует об этом эксперту. Подобная неоднозначность чаще всего указывает на скрытую ошибку или спорный момент в исходной разметке, сделанной человеком.

Эффективность подхода была доказана экспериментально на базе известного отечественного ресурса «СинТагРус». Проверив сегмент из 8199 фраз, разработка обнаружила 1148 потенциальных зон конфликта. Примечательно, что львиная доля расхождений (1078 случаев) оказалась связана со спорной постановкой знаков препинания – запятых, которые традиционно вызывают сложности даже у людей.

Решение не ставит целью вытеснить лингвистов, а предлагается интеллектуальный фильтр, который берет на себя рутинный поиск аномалий. Это позволяет специалистам не тратить часы на сплошную вычитку, а сразу концентрироваться на фрагментах, требующих экспертного вмешательства.

Таким образом, созданный инструментарий становится мощным ускорителем при подготовке цифровых архивов для обучения систем ИИ. Сокращая время на верификацию входящей информации, он напрямую влияет на итоговую точность и надежность будущих голосовых ассистентов и чат-ботов. Свои выводы группа ученых представила на традиционной научной конференции «Ломоносовские чтения», обозначив важный шаг к созданию более совершенных моделей понимания текста.

Читайте также

OpenAI использовала 10 000 ИИ-агентов для решения задачи тысячелетия

OpenAI использовала 10 000 ИИ-агентов для решения задачи тысячелетия

Умное покрытие спасет сверхпроводники от перегорания

Умное покрытие спасет сверхпроводники от перегорания

Астрофизические алгоритмы применили для моделирования земной аэродинамики

Астрофизические алгоритмы применили для моделирования земной аэродинамики

Сверхзвуковой самолет NASA X-59 завершил 25 испытательных полетов

Сверхзвуковой самолет NASA X-59 завершил 25 испытательных полетов

Российская технология исключит бракованные заготовки из производства за 5 секунд

Российская технология исключит бракованные заготовки из производства за 5 секунд

Энтузиаст нашел в гараже почти 2 ТБ оперативной памяти стоимостью около миллиона рублей

Энтузиаст нашел в гараже почти 2 ТБ оперативной памяти стоимостью около миллиона рублей

В Китае робот с ИИ самостоятельно провел операцию на сердце

В Китае робот с ИИ самостоятельно провел операцию на сердце

Китай завершил первый тоннель новой железной дороги в Европу в обход России

Китай завершил первый тоннель новой железной дороги в Европу в обход России

15 технологий древности, которыми человечество пользуется до сих пор

15 технологий древности, которыми человечество пользуется до сих пор

Семь самых больших машин в истории: гиганты весом в тысячи тонн и длиной в километры

Семь самых больших машин в истории: гиганты весом в тысячи тонн и длиной в километры

Те самые редкоземельные металлы: что в них редкого и зачем они вообще нужны

Те самые редкоземельные металлы: что в них редкого и зачем они вообще нужны

20 лет назад Плутон перестал быть планетой — почему с этим до сих пор не все согласны?

20 лет назад Плутон перестал быть планетой — почему с этим до сих пор не все согласны?

Глубоководная рыба умеет ходить по дну задом наперед

Глубоководная рыба умеет ходить по дну задом наперед

Археологи раскрыли истинные причины каннибализма в неолитической Европе

Археологи раскрыли истинные причины каннибализма в неолитической Европе

ИИ-помощник для незрячих использует лидар, сонар и камеру

ИИ-помощник для незрячих использует лидар, сонар и камеру

Ученые на самолете преследовали падающие спутники, чтобы изучить загрязнение атмосферы

Ученые на самолете преследовали падающие спутники, чтобы изучить загрязнение атмосферы