Устройство AlterEgo для распознавания артикуляции на основе методов глубокого машинного обучения

Студенты-исследователи из Массачусетского Технологического Института в начале апреля представили портативное устройство (систему) под названием AlterEgo. Надеваемое на ушную раковину по принципу беспроводной гарнитуры устройство с датчиком у рта носителя, способное на основе подходов глубокого машинного обучения распознавать слова, которые носители устройства пытаются артикулировать, но не могут громко произнести.

Используя видеоускоритель NVIDIA TITAN X, платформу (framework) глубокого машинного обучения TenserFlow с технологией cuDNN, студенты обучали систему, бесшумно произнося текст на протяжении 31 часа. Полученная нейросеть была протестирована на 15 людях и получила точность в 92%.

Устройства, способные с помощью технологии машинного обучения распознать бесшумную человеческую артикуляцию, разрабатываются не первый год. Особенностью AlterEgo являются его габариты. Так же отметим, что устройство может показаться интересным не только производителям оборудования для людей с ограниченными возможностями, но и, с учётом некоторых модификаций, специальным организациям для выполнения особых задач: например, расшифровка разговора между людьми в прямой видимости (или на записи), но за звукоизолирующим стеклом.