Новое устройство переводит безмолвные мысли в речь

Новая гарнитура может революционизировать общение для заблокированных людей, людей с БАС и тех, кто получил травму, которая затрудняет общение. На самом деле исследования в этой области идут по нескольким направлениям. Возможно, пройдет не так много времени, прежде чем речевое общение в реальном времени снова станет возможным для людей, которые сейчас либо молчат, либо ограничены использованием болезненно медленных альтернатив.

По словам исследователя MIT Media Lab Арнава Капура, его новое устройство, AlterEgo (на фото выше), обвивает шею и обнаруживает микро-движения, которые мы совершаем внутри с помощью гортани и голосовых связок, когда мы думаем о речи. Это устройство не является настоящим телепатом или устройством для чтения мыслей, но оно обнаруживает, когда вы думаете о разговоре, фактически не делая этого.

Видео ниже содержит больше информации об AlterEgo, а также демонстрацию оборудования в действии. Это включает демонстрацию аппаратного обеспечения, используемого человеком с боковым амиотрофическим склерозом, также известным как болезнь Лу Герига.

В этой области ведутся новые технологические работы по нескольким направлениям. Устройство AlterEgo неинвазивно, но также может быть ограничено в том, что оно может достичь по этой причине; если у людей недостаточно мышечного контроля или мышц, AlterEgo может не работать. Исследователи из другого проекта в прошлом месяце опубликовали статью в журнале «Nature», в которой подробно описывается система, которая переводит активность мозга непосредственно в речь. Это представляет собой принципиально отличающийся от AlterEgo подход по ряду аспектов, немаловажным из которых является использование электродов, имплантированных в мозг, в отличие от носимых, надетых под подбородок.

Тем не менее коллективная работа, которая здесь проводится, впечатляет. Команда по стимулированию мозга в Природе пишет:

Здесь мы разработали нейронный декодер, который явно использует кинематические и звуковые представления, закодированные в человеческой корковой деятельности, чтобы синтезировать слышимую речь. Рекуррентные нейронные сети сначала декодировали непосредственно записанную корковую активность в представления артикуляционного движения, а затем преобразовывали эти представления в речевую акустику. В закрытых словарных тестах слушатели могли легко идентифицировать и транскрибировать речь, синтезированную из кортикальной активности.

Технологические исследования, проводимые здесь, рано, во всех случаях. Но, безусловно, кажется, что работа такого типа может позволить людям, которые борются с медленными, отслеживающими глаза или коммуникационными устройствами, основанными на движениях мышц, снова «говорить». Чем больше обоснованных подходов мы найдем для решения этой проблемы, тем больше людей мы сможем помочь тем, кто страдает от нее.