«Семантический слух» может стать будущим интеллектуального персонального аудио

Ученые из Вашингтонского университета создали новый вид шумоподавления, который они назвали "семантическим слухом". В основе семантического слуха лежат алгоритмы глубокого обучения, позволяющие определять и идентифицировать характеристики различных звуков. На практике это приводит к созданию наушников с функцией шумоподавления (подключаемых к смартфону), способных пропускать те звуки, которые желает услышать пользователь, будь то щебет птиц, человеческая речь или сигнал тревоги.

Текущая версия системы семантического слуха позволяет пользователям блокировать все звуки и пропускать определенные звуки, либо пропускать все звуки и блокировать определенные звуки. Команда, работающая над проектом, опубликовала статью о своих результатах.

"Понимание того, как звучит птица, и выделение этого звука из всех других звуков окружающей среды требует интеллектуального анализа в реальном времени, чего не могут достичь современные наушники с шумоподавлением", - сказал профессор Шьям Голлакота. "Проблема заключается в том, что звуки, которые слышат пользователи наушников, должны синхронизироваться с их зрительными ощущениями. Вы не можете услышать чей-то голос через две секунды после того, как он с вами заговорил. Это означает, что нейронные алгоритмы должны обрабатывать звуки менее чем за сотую долю секунды".