Нейросеть смогла преобразовать мысли в речь

Учёным удалось создать нейросеть, которая смогла синтезировать речь из мозговых волн с погрешностью всего 3%

Нейросеть смогла преобразовать мысли в речь

Ранние попытки расшифровать мозговые волны и преобразовать их в речь сложно назвать успешными. Лучший результат которого удавалось добиться — это произнесение компьютером отдельных слогов и местоимений. Но результаты недавних экспериментов специалистов по машинному обучению из Университета Калифорнии позволяют рассуждать о скором появлении полноценных синтезаторов речи.

В статье, опубликованной в журнале Nature Neuroscience описывается результат работы специального программного алгоритма основанного на принципах машинного обучения. Программа сопоставляет команды от мозга с определенными звуками. Сами команды считываются при помощи интерфейса «компьютер-мозг». До начала основного эксперимента в компьютер были загруженные данные паттернов для нескольких предложений, которые не были связаны с используемыми текстами.

В ходе эксперимента четверо добровольцев вслух читали предложения, пока электроды регистрировали их мозговую активность. Среди собранных данных алгоритм расшифровки искал регулярно повторяющиеся одинаковые команды-паттерны. Эти команды мозг посылает к нужным частям голосового аппарата, который воспроизводит гласные или согласные звуки. В результате программе удалось с высокой точностью декодировать текст из 30−50 предложений. Ученые отметили, что количество текста и синхронность «перевода» увеличивались после «общения» машины с каждым новым участником. Стоит отметить, что тексты у всех участников были разные.

На следующем этапе команда разработчиков планирует добавить в алгоритм закономерностями общего английского языка.

Читайте также

В России создают автономных роботов для огнеупорного производства

В России создают автономных роботов для огнеупорного производства

В Японии возник острый дефицит углекислого газа

В Японии возник острый дефицит углекислого газа

«Умный» столик для разварки кристаллов спасет электронику от брака

«Умный» столик для разварки кристаллов спасет электронику от брака

Ученые виртуально развернули и прочли свитки папируса, обугленные при извержении Везувия

Ученые виртуально развернули и прочли свитки папируса, обугленные при извержении Везувия

Российский 3D-принтер печатает керамические узлы для авиадвигателей, выдерживающие 1500 °C

Российский 3D-принтер печатает керамические узлы для авиадвигателей, выдерживающие 1500 °C

Алгоритм МГУ выявляет скрытые ошибки в данных для обучения ИИ

Алгоритм МГУ выявляет скрытые ошибки в данных для обучения ИИ

Энтузиаст собрал компьютер для апокалипсиса, работающий от огня

Энтузиаст собрал компьютер для апокалипсиса, работающий от огня

Канатная дорога между Россией и Китаем заработает в мае 2027 года

Канатная дорога между Россией и Китаем заработает в мае 2027 года

Робот МФТИ установил рекорд сборки головоломки «мегаминкс» за 9,6 секунды

Робот МФТИ установил рекорд сборки головоломки «мегаминкс» за 9,6 секунды

Медицинские технологии, в которые почти невозможно поверить

Медицинские технологии, в которые почти невозможно поверить

Квантовый двигатель нарушает законы термодинамики, генерируя работу и холод одновременно

Квантовый двигатель нарушает законы термодинамики, генерируя работу и холод одновременно

Как РЛС Вадима Мацкевича решила исход Корейской войны

Как РЛС Вадима Мацкевича решила исход Корейской войны

Ученые раскрыли пользу кимчи: пробиотики, витамины и жирные кислоты

Ученые раскрыли пользу кимчи: пробиотики, витамины и жирные кислоты

Ученые предложили новый сценарий происхождения первых клеток на Земле

Ученые предложили новый сценарий происхождения первых клеток на Земле

Семь самых странных явлений Солнечной системы, которые сложно объяснить

Семь самых странных явлений Солнечной системы, которые сложно объяснить

Samsung Galaxy Z Fold8 Ultra — обзор складного смартфона с Snapdragon 8 Elite Gen 5 и батареей 5000 мАч

Samsung Galaxy Z Fold8 Ultra — обзор складного смартфона с Snapdragon 8 Elite Gen 5 и батареей 5000 мАч