Музыка на кончиках пальцев — новая технология позволяет «пощупать» звук

Аудио-тактильный алгоритм, созданный учеными Университета Малаги, передает мелодическую информацию посредством вибрации, которую можно ощутить при кожном контакте.

Музыка на кончиках пальцев — новая технология позволяет «пощупать» звук

Новаторский прототип, разработанный экспертами факультета электроники Университета Малаги и членами научно-исследовательской группы "Электроника для приборов и систем", позволит людям с нарушением слуха слушать музыку с помощью осязания.

Устройство состоит из аудиотактильного алгоритма, который преобразует монофоническую музыку в осязаемые стимулы на основе вибрации с использованием "тактильных иллюзий". По словам исследователей, это похоже на "взлом" нервной системы, чтобы получить другой ответ на отправленный реальный стимул.

Исследователи предсказывают, что это приведет к созданию портативного терминала, который можно будет взять с собой на концерт, поскольку этот прототип будет легко переноситься на технологические устройства, такие как смартфоны.

Музыка на кончиках пальцев — новая технология позволяет

Источник: University of Malaga

Внешний вид прототипа создания "тактильных иллюзий".

Важной частью научной работы стала разработка алгоритма, который может преобразовывать музыкальные особенности и структуры, взятые из файлов MIDI — цифровой интерфейс музыкальных инструментов — в "вибротактильные стимулы". Этот формат был выбран исходя из того, что звуковая информация хранится в символьном виде, который достаточно легко интерпритировать различными способами.

Текущие модели не гарантируют соответствия между эмоциональным откликом на музыку и ее вибротактильной версией. Ввиду этого инженеры предлагают устройство "тактильных иллюзий" для улучшения и расширения спектра музыкальных признаков, добавляя вибрациям динамики в виде движения, изменения направления и местоположения.

Результаты первых экспериментов, в которых участвовало более пятидесяти добровольцев, свидетельствуют о том, что расстановка "тактильных иллюзий" вызывает больше положительных, чем отрицательных эмоций. Они также воспринимаются как более приятные и стимулирующие, чем звук, вызывая эмоциональную реакцию, отличную от оригинальной музыки.

Этот первый прототип был представлен на 11-м Международном семинаре по дизайну Haptic & Audio Interaction Design (Великобритания) — крупнейшем международном мероприятии, специализирующемся на этих областях исследований — после публикации в научном журнале LNCS . В настоящее время исследователи UMA работают над второй моделью и продолжают эксперименты.

Читайте также

В России создали искусственное ухо с помощью гибридной 3D-биопечати

В России создали искусственное ухо с помощью гибридной 3D-биопечати

В Китае создали простую роборуку BioflexBot, которая оказалась гибче человеческой

В Китае создали простую роборуку BioflexBot, которая оказалась гибче человеческой

ИИ помог найти опасную уязвимость Zoom всего за 20 запросов

ИИ помог найти опасную уязвимость Zoom всего за 20 запросов

Цифровые двойники помогут наделить вагон-термос беспрецедентными свойствами

Цифровые двойники помогут наделить вагон-термос беспрецедентными свойствами

В МАИ научили дроны видеть препятствия и думать самостоятельно

В МАИ научили дроны видеть препятствия и думать самостоятельно

В России создают автономных роботов для огнеупорного производства

В России создают автономных роботов для огнеупорного производства

В Японии возник острый дефицит углекислого газа

В Японии возник острый дефицит углекислого газа

«Умный» столик для разварки кристаллов спасет электронику от брака

«Умный» столик для разварки кристаллов спасет электронику от брака

Робот МФТИ установил рекорд сборки головоломки «мегаминкс» за 9,6 секунды

Робот МФТИ установил рекорд сборки головоломки «мегаминкс» за 9,6 секунды

Медицинские технологии, в которые почти невозможно поверить

Медицинские технологии, в которые почти невозможно поверить

Квантовый двигатель нарушает законы термодинамики, генерируя работу и холод одновременно

Квантовый двигатель нарушает законы термодинамики, генерируя работу и холод одновременно

ИИ в джунглях: как в Коста-Рике тестируют сообразительность диких обезьян

ИИ в джунглях: как в Коста-Рике тестируют сообразительность диких обезьян

В России созданы планарные ионные ловушки для квантовых компьютеров

В России созданы планарные ионные ловушки для квантовых компьютеров

Рождение сверхпрочных материалов: как нанопокрытия обманывают физику разрушения

Рождение сверхпрочных материалов: как нанопокрытия обманывают физику разрушения

Телескоп James Webb обнаружил возможный новый тип космических объектов — «звезду-черную дыру»

Телескоп James Webb обнаружил возможный новый тип космических объектов — «звезду-черную дыру»

Эмулятор PlayStation 5 впервые запустил Astro’s Playroom на Steam Deck

Эмулятор PlayStation 5 впервые запустил Astro’s Playroom на Steam Deck