Алгоритм МГУ выявляет скрытые ошибки в данных для обучения ИИ

В Московском государственном университете представили новый инструмент для повышения качества искусственного интеллекта. Исследователи с факультета вычислительной математики и кибернетики создали алгоритм, способный автоматически находить неточности в массивах данных, на которых обучаются нейросети. Речь идет о так называемых размеченных корпусах – огромных базах предложений, где вручную указана грамматическая структура каждой фразы. Именно от чистоты этих «учебников» зависит, насколько точно будущая модель будет понимать человеческую речь.

Алгоритм МГУ выявляет скрытые ошибки в данных для обучения ИИ

Предложенная технология действует как своего рода детектор парадоксов. Она строит собственную статистическую модель по уже размеченным данным и начинает перепроверять их работу. Если алгоритмы сталкиваются с ситуацией, когда одному предложению можно приписать несколько разных синтаксических структур, система сигнализирует об этом эксперту. Подобная неоднозначность чаще всего указывает на скрытую ошибку или спорный момент в исходной разметке, сделанной человеком.

Эффективность подхода была доказана экспериментально на базе известного отечественного ресурса «СинТагРус». Проверив сегмент из 8199 фраз, разработка обнаружила 1148 потенциальных зон конфликта. Примечательно, что львиная доля расхождений (1078 случаев) оказалась связана со спорной постановкой знаков препинания – запятых, которые традиционно вызывают сложности даже у людей.

Решение не ставит целью вытеснить лингвистов, а предлагается интеллектуальный фильтр, который берет на себя рутинный поиск аномалий. Это позволяет специалистам не тратить часы на сплошную вычитку, а сразу концентрироваться на фрагментах, требующих экспертного вмешательства.

Таким образом, созданный инструментарий становится мощным ускорителем при подготовке цифровых архивов для обучения систем ИИ. Сокращая время на верификацию входящей информации, он напрямую влияет на итоговую точность и надежность будущих голосовых ассистентов и чат-ботов. Свои выводы группа ученых представила на традиционной научной конференции «Ломоносовские чтения», обозначив важный шаг к созданию более совершенных моделей понимания текста.

Читайте также

Ученые создали датчик, который чувствует влагу без прикосновения и запоминает ее

Ученые создали датчик, который чувствует влагу без прикосновения и запоминает ее

В России собрали второй реактор для новой плавучей атомной электростанции

В России собрали второй реактор для новой плавучей атомной электростанции

Российский ИИ научился предсказывать 15 болезней по одному снимку глазного дна

Российский ИИ научился предсказывать 15 болезней по одному снимку глазного дна

В Японии массово скупают подержанные книги — продавцы подозревают компании в сфере ИИ

В Японии массово скупают подержанные книги — продавцы подозревают компании в сфере ИИ

Искусственный интеллект SG-Safe в 10 раз повысил «смелость» складских роботов

Искусственный интеллект SG-Safe в 10 раз повысил «смелость» складских роботов

Китай запустил спутник с ИИ-суперкомпьютером для обработки данных прямо на орбите

Китай запустил спутник с ИИ-суперкомпьютером для обработки данных прямо на орбите

Игровой ПК за 1,2 млн рублей получил вишню с распускающимися от тепла цветами

Игровой ПК за 1,2 млн рублей получил вишню с распускающимися от тепла цветами

ИИ TANGO учит гуманоидных роботов преодолевать офисную полосу препятствий

ИИ TANGO учит гуманоидных роботов преодолевать офисную полосу препятствий

Состоялся запуск новейшего космического телескопа NASA

Состоялся запуск новейшего космического телескопа NASA

Британский визионер хочет запустить максимально дешевую миссию к Альфа Центавра

Британский визионер хочет запустить максимально дешевую миссию к Альфа Центавра

Как ученые на «Конкорде» устроили погоню за солнечным затмением и растянули семь минут до 74

Как ученые на «Конкорде» устроили погоню за солнечным затмением и растянули семь минут до 74

Пять медицинских роботов, которые уже меняют работу больниц прямо сейчас

Пять медицинских роботов, которые уже меняют работу больниц прямо сейчас

Моющие средства с отдушками выбрасывают в воздух триллионы твердых наночастиц

Моющие средства с отдушками выбрасывают в воздух триллионы твердых наночастиц

Робот-спасатель Link сгорел в атмосфере, не успев поднять устаревший телескоп NASA Swift

Робот-спасатель Link сгорел в атмосфере, не успев поднять устаревший телескоп NASA Swift

Магнитное поле Земли может влиять на старение живых организмов

Магнитное поле Земли может влиять на старение живых организмов

Qualcomm может добавить поддержку DirectX 12 для запуска ПК-игр на Android

Qualcomm может добавить поддержку DirectX 12 для запуска ПК-игр на Android