Вчені перетворюють сканування мозку в розумну мову з нейронною мережею

Вчені перетворюють сканування мозку в розумну мову з нейронною мережею

Стівен Хокінг був, мабуть, найвідомішим користувачем обладнання для синтезу мови «вокодера», але він не був один. Люди в усьому світі не в змозі говорити самостійно, але наука може наближатися до точки, де вони можуть перетворити свої внутрішні думки на мовлення без стомлюючого набору тексту або натискання. Команда з лабораторії нейронної акустичної обробки в Колумбійському університеті розробила модель AI, яка може перетворити сканування мозку в зрозумілу мову.

Дослідження поєднує в собі кілька досягнень в машинному навчанні, щоб інтерпретувати закономірності діяльності в мозку, щоб з'ясувати, що хтось хоче сказати, навіть якщо вони фізично не в змозі зробити шум. Це не машина читання розуму - сигнали надходять з слухової кори, де ваш мозок обробляє мова. Отже, він може зрозуміти реальну мову, а не так звані «уявні слова», які могли б утримувати ваші найглибші, найтемніші секрети.

Технологія все ще дуже триває; Більш доказ концепції, ніж те, що ви можете підключити до голови. У дослідженні використовували нервові сигнали, записані з поверхні мозку під час операції на епілепсію, процес, що називається інвазивної електрокортикографії (ECoG). Дослідники під керівництвом Німа Месгарані використовували хворих на епілепсію, тому що їм часто доводиться проходити операцію на мозку, що включає неврологічне тестування.

Вчені перетворюють сканування мозку в розумну мову з нейронною мережею

Дослідники фіксували активність мозку, в той час як піддані, які слухали люди, читали вибрані слова, такі як цифри нуль-дев'ять. Це важливо, оскільки при обробці мови кожен має різні моделі мозкових хвиль. Отже, Месгарані і команда підготували нейронну мережу, специфічну для кожного пацієнта. Вони мали лише 30 хвилин даних, що обмежує ефективність моделі. Проте результати все ж вражають. Команда підживлювала сирі сканування ECoG, а мережа генерувала мова з вокодером. Тут можна послухати зразок моделей. Є чотири моделі, останні з яких повинні бути найбільш реалістичними.

Все це трохи робототехнічно, і перші кілька цифр важко розібрати. Проте команда стверджує, що близько трьох чвертей опитаних змогли зрозуміти висновок вокодера. Щоб зробити кращі нейронні мережі, потрібно більше даних. Збір даних про власні хвилі мозку від всіх, хто використовує інвазивну електрокортикографію, не зовсім практичний. Одного дня ми можемо знайти деяку спільність, яка робить універсальний переклад мозку як універсальний розпізнавання мови. Але поки що це вражаючий, але непрактичний перший крок.

Читати далі

Tencent Китай додає сканування обличчя для моніторингу дитячих ігор
Tencent Китай додає сканування обличчя для моніторингу дитячих ігор

Десятки мобільних ігор буде використовувати розпізнавання обличчя, щоб переконатися, що ніхто не має ніяких неповнолітніх ігор занадто пізно вночі. Це лише початок, і Tencent каже, що технологія "Midnight Patrol" приходить до більшої кількості ігор.

Canon подати позов над принтера, який перестає сканування, факсу, коли вона закінчується чорнилом
Canon подати позов над принтера, який перестає сканування, факсу, коли вона закінчується чорнилом

Ви читаєте це правильно: функції, які не є технічно не залежать від того, що при наявності чорнила не працюють без того, що точно.

Apple може бути випущена суперечлива програма сканування зображень CSAM
Apple може бути випущена суперечлива програма сканування зображень CSAM

Яблуко раніше заявив, що це лише затримка технології сканування зображень CSAM, тому він міг зібрати відгук, але тепер він з'являється, що компанія може бути зібрана все разом.

Дослідники SETI розпочали сканування фону зображень для чужорідних сигналів
Дослідники SETI розпочали сканування фону зображень для чужорідних сигналів

Радіотелески чутливі не лише до цільової зірки, але й до простору, що оточує її. Можливо, підказує новий аналіз, на задньому плані можуть бути деякі іноземці.