В революционном прогрессе для людей с параличом исследователи из Калифорнийского университета Дэвис (UC Davis) разработали интерфейс COMPUTER (BCI), который позволяет парализованному человеку общаться и даже «петь» через компьютер с минимальной задержкой.
Исследовательская система BCI была протестирована на участнике, страдающем от амиотрофического бокового склероза (ALS). Технология отражает необработанные нейронные сигналы с помощью четырех микроэлектродных массивов, хирургически имплантированных в область мозга, ответственного за физическое производство речи. Объединяя обработку с низкой задержкой с моделью декодирования, управляемой AI, система синтезирует речь участника в режиме реального времени. Важно отметить, что система не читает мысли, но переводит сигналы мозга, произведенные, когда он пытается использовать свои мышцы, чтобы говорить.
Синтезированная речь очень напоминает естественный голос участника, благодаря алгоритму голосового клонирования, обученным аудио -образцам, записанным до начала БАС. Весь процесс, от приобретения сигнала до генерации речи, происходит в пределах впечатляющих 10 миллисекунд, что позволяет почти инстанчно общаться.
BCI также продемонстрировала способность распознавать, когда участник пытался петь, определив одну из трех предназначенных шагов и модулируя его голос для синтеза вокальных мелодий. Технология может воспроизводить попытки вмешать звуки, такие как «AAH», «OOH» и «HMM», определить, является ли предложение вопросом или утверждением, и определить, когда подчеркиваются определенные слова. Исследовательская группа сообщила, что система может успешно воспроизводить выдуманные слова, не включенные в учебные данные декодера ИИ, что способствует гораздо более выразительной синтезированной выводе речи по сравнению с предыдущими системами BCI.
Сергей Стависки, старший автор исследовательской работы, подчеркнул значение, заявив, что с мгновенным синтезом голоса пользователи могут быть более включены в разговоры. Кристиан Херф, вычислительный нейробиолог, не участвующий в исследовании, назвал его «Святым Граалем в речи BCI». Исследователи Калифорнийского университета в Дэвисе планируют расширить свое исследование, воспроизводя эти результаты с большим количеством субъектов, испытывающих потерю речи из -за различных условий, предлагая путь для улучшения общения и качества жизни для людей с параличом.
Source: Мозговой имплантат восстанавливает почти мгновенную речь для парализованного человека
