Новаторский прототип, разработанный экспертами факультета электроники Университета Малаги и членами научно-исследовательской группы «Электроника для приборов и систем», позволит людям с нарушением слуха слушать музыку с помощью осязания.
Устройство состоит из аудиотактильного алгоритма, который преобразует монофоническую музыку в осязаемые стимулы на основе вибрации с использованием «тактильных иллюзий». По словам исследователей, это похоже на «взлом» нервной системы, чтобы получить другой ответ на отправленный реальный стимул.
Исследователи предсказывают, что это приведет к созданию портативного терминала, который можно будет взять с собой на концерт, поскольку этот прототип будет легко переноситься на технологические устройства, такие как смартфоны.
Важной частью научной работы стала разработка алгоритма, который может преобразовывать музыкальные особенности и структуры, взятые из файлов MIDI — цифровой интерфейс музыкальных инструментов — в «вибротактильные стимулы». Этот формат был выбран исходя из того, что звуковая информация хранится в символьном виде, который достаточно легко интерпритировать различными способами.
Текущие модели не гарантируют соответствия между эмоциональным откликом на музыку и ее вибротактильной версией. Ввиду этого инженеры предлагают устройство «тактильных иллюзий» для улучшения и расширения спектра музыкальных признаков, добавляя вибрациям динамики в виде движения, изменения направления и местоположения.
Результаты первых экспериментов, в которых участвовало более пятидесяти добровольцев, свидетельствуют о том, что расстановка «тактильных иллюзий» вызывает больше положительных, чем отрицательных эмоций. Они также воспринимаются как более приятные и стимулирующие, чем звук, вызывая эмоциональную реакцию, отличную от оригинальной музыки.
Этот первый прототип был представлен на 11-м Международном семинаре по дизайну Haptic & Audio Interaction Design (Великобритания) — крупнейшем международном мероприятии, специализирующемся на этих областях исследований — после публикации в научном журнале LNCS . В настоящее время исследователи UMA работают над второй моделью и продолжают эксперименты.
