Новий пристрій переводить тихі думки в мову

Нова гарнітура може революціонізувати спілкування для заблокованих осіб, людей з ALS, і всіх, хто зазнав травми, що ускладнює спілкування. Фактично, дослідження в цій області йдуть по декількох різних шляхах. Це може бути не набагато довше, перш ніж мовне спілкування в реальному часі знову стане можливим для людей, які тепер або мовчать, або обмежуються використанням болісно повільних альтернатив.

За даними дослідника MIT Media Lab Arnav Kapur, його новий пристрій, AlterEgo (на фото вище), обертається навколо шиї і виявляє мікро-руху, які ми робимо внутрішньо з гортані і голосових зв'язків, коли ми думаємо про мову. Цей пристрій не є справжнім телепатичним чи продуманим інструментом для читання, але він виявляє, коли ви думаєте про розмову без того, щоб насправді це зробити.

На відео нижче наведено більше інформації про AlterEgo, а також демонстрація апаратного забезпечення в дії. Вона включає в себе демонстрацію обладнання, що використовується людиною з аміотрофічним бічним склерозом, також відомим як хвороба Лу Геріга.

У цій сфері на декількох фронтах робиться нова технологічна робота. Пристрій AlterEgo є неінвазивним, але може також бути обмеженим у тому, що він може досягти з цієї причини; якщо у людей немає достатнього контролю м'язів або достатньої кількості м'язів, AlterEgo може не працювати. Дослідники в іншому проекті опублікували статтю в Nature минулого місяця, однак деталізували систему, яка безпосередньо переводить мозку в мову. Це являє собою принципово інший підхід від AlterEgo у ряді аспектів, не в останню чергу використання електродів, імплантованих у головний мозок, на відміну від носяться прив'язки під підборіддям.

Проте колективна робота тут вражає. Команда стимулювання мозку в природі пише:

Тут ми розробили нейронний декодер, який явно використовує кінематичні та звукові уявлення, кодовані в людській кортикальної діяльності, для синтезу звукової мови. Рекурентні нейронні мережі спочатку розшифровували безпосередньо записану кортикальну активність в репрезентації артикуляційного руху, а потім перетворювали ці уявлення в акустику мови. У закритих тестах лексики слухачі могли легко ідентифікувати та транскрибувати мови, синтезовані з кортикальної діяльності.

Технологічні дослідження, що проводяться тут, є раннім, у всіх випадках. Але, безумовно, здається, що робота цього типу має потенціал, щоб дозволити людям, які борються з повільними, орієнтованими на очі або м'язовими рухами пристроями зв'язку, «знову говорити». Чим більш правильні підходи ми можемо знайти для вирішення цієї проблеми, тим більше людей ми зможемо допомогти тим, хто страждає від неї.