Новое устройство переводит безмолвные мысли в речь

Новое устройство переводит безмолвные мысли в речь

Новая гарнитура может революционизировать общение для заблокированных людей, людей с БАС и тех, кто получил травму, которая затрудняет общение. На самом деле исследования в этой области идут по нескольким направлениям. Возможно, пройдет не так много времени, прежде чем речевое общение в реальном времени снова станет возможным для людей, которые сейчас либо молчат, либо ограничены использованием болезненно медленных альтернатив.

По словам исследователя MIT Media Lab Арнава Капура, его новое устройство, AlterEgo (на фото выше), обвивает шею и обнаруживает микро-движения, которые мы совершаем внутри с помощью гортани и голосовых связок, когда мы думаем о речи. Это устройство не является настоящим телепатом или устройством для чтения мыслей, но оно обнаруживает, когда вы думаете о разговоре, фактически не делая этого.

Видео ниже содержит больше информации об AlterEgo, а также демонстрацию оборудования в действии. Это включает демонстрацию аппаратного обеспечения, используемого человеком с боковым амиотрофическим склерозом, также известным как болезнь Лу Герига.

В этой области ведутся новые технологические работы по нескольким направлениям. Устройство AlterEgo неинвазивно, но также может быть ограничено в том, что оно может достичь по этой причине; если у людей недостаточно мышечного контроля или мышц, AlterEgo может не работать. Исследователи из другого проекта в прошлом месяце опубликовали статью в журнале «Nature», в которой подробно описывается система, которая переводит активность мозга непосредственно в речь. Это представляет собой принципиально отличающийся от AlterEgo подход по ряду аспектов, немаловажным из которых является использование электродов, имплантированных в мозг, в отличие от носимых, надетых под подбородок.

Тем не менее коллективная работа, которая здесь проводится, впечатляет. Команда по стимулированию мозга в Природе пишет:

Здесь мы разработали нейронный декодер, который явно использует кинематические и звуковые представления, закодированные в человеческой корковой деятельности, чтобы синтезировать слышимую речь. Рекуррентные нейронные сети сначала декодировали непосредственно записанную корковую активность в представления артикуляционного движения, а затем преобразовывали эти представления в речевую акустику. В закрытых словарных тестах слушатели могли легко идентифицировать и транскрибировать речь, синтезированную из кортикальной активности.

Технологические исследования, проводимые здесь, рано, во всех случаях. Но, безусловно, кажется, что работа такого типа может позволить людям, которые борются с медленными, отслеживающими глаза или коммуникационными устройствами, основанными на движениях мышц, снова «говорить». Чем больше обоснованных подходов мы найдем для решения этой проблемы, тем больше людей мы сможем помочь тем, кто страдает от нее.

Читать далее

Chromebook увеличивает долю рынка по мере перехода образования в Интернет
Chromebook увеличивает долю рынка по мере перехода образования в Интернет

Продажи Chromebook резко выросли из-за пандемии: продажи выросли на 90 процентов, и ожидается рост в будущем. Это создает некоторые проблемы для таких компаний, как Microsoft.

Раджа Кодури из Intel представит на предстоящей конференции Samsung Foundry
Раджа Кодури из Intel представит на предстоящей конференции Samsung Foundry

На этой неделе Раджа Кодури из Intel выступит на литейном мероприятии Samsung - и этого не случилось бы, если бы Intel не было, что сказать.

Обзор: Oculus Quest 2 может стать переломным моментом для массового внедрения VR
Обзор: Oculus Quest 2 может стать переломным моментом для массового внедрения VR

Oculus Quest 2 теперь доступен, и это улучшение по сравнению с оригиналом во всех отношениях. И все же это на 100 долларов дешевле, чем последний выпуск. Проведя некоторое время с Quest 2, я считаю, что мы можем оглянуться на него как на гарнитуру, которая наконец сделала VR доступной для массовых потребителей.

AMD бьет рекорды выручки за счет увеличения продаж Zen 3, Xbox Series X и PS5
AMD бьет рекорды выручки за счет увеличения продаж Zen 3, Xbox Series X и PS5

Опубликованы результаты AMD за третий квартал 2020 года, и результаты во всех отношениях превосходны для компании.