Исследователям удалось создать цифровой аватар, который общался вместо женщины. Мозговой имплантат переводил мыслительный процесс в речь, которую транслировал искусственный интеллект.
После инсульта у многих пациентов возникают проблемы с речью и координацией. Им трудно произносить длинные предложения, некоторые специфические звуки, непроста ассоциация «предмет – это слово, которое означает это». Некоторые даже теряют способность говорить, так как остаются парализованными.
Именно это случилось с американкой Энн Джонсон. Женщина перенесла инсульт 18 лет назад, с тех пор не может говорить и практически не двигается. Однако ее осознанность ясна, она понимает окружающих людей и трезво оценивает происходящее вокруг. Исследователи из Калифорнийского университета в Сан-Франциско и Калифорнийского университета в Беркли помогли женщине снова выразить свои мысли.
Ученые создали инновационный имплант, способный преобразовывать активность мозга в слова и выражения лица. В этом помогает искусственный интеллект. Эксперты назвали свой метод ECOG — инвазивный способ записи электрических сигналов мозга с помощью многоэлектродных матриц, имплантированных в ткани органа.
Женщине было дано задание: увидев текст на экране, она должна была попытаться представить, как она физически произносит предложение, то есть представить движения этих мышц. Электроды сканировали информацию, которая происходила в это время в мозгу. Таким образом, искусственный интеллект фактически научился сравнивать активность мозга и связанные с ней звуки и слова.
В результате аватар на экране, выбранный самой женщиной, произносил слова, которые американка крутила в голове. Для синтезированной речи исследователи использовали запись свадьбы женщины, на которой она поднимала тост.
Технология смогла почти безошибочно предсказать слова, которые произнесет аватар жертвы. Например, когда Энн Джонсон попыталась сказать «Может быть, мы их потеряли», система записала это как «Может быть, это имя». Однако искусственный интеллект перевел и отправил половину предложений без ошибок.
Исследователи надеются, что в ближайшем будущем технология поможет общаться всем пациентам, когда-либо потерявшим речь из-за различных патологий. Пока у технологии есть проблема в использовании: искусственный интеллект сканирует с ошибками, а для работы необходимы провода, которые отходят от головы пациента из-за подключенного оборудования. Специалисты улучшат разработку.
- Хотите связаться со мной?
