Исследователи при поддержке Национальных институтов здравоохранения США представили инновационный интерфейс «мозг — компьютер», который позволяет людям с тяжелым параличом одновременно синтезировать устную речь и воспроизводить выразительные жесты верхней части тела через виртуальный аватар, сообщает Ertenmedia.kz.
Предыдущие поколения нейропротезов умели декодировать мозговые сигналы либо только для воспроизведения речи, либо исключительно для управления движениями конечностей. Новая разработка команды ученых из Калифорнийского университета в Сан-Франциско стала первой в мире системой, объединившей оба канала коммуникации в режиме реального времени. Это максимально приближает цифровое взаимодействие к естественному человеческому общению.
Синхронная работа моторной коры
Тяжелые инсульты ствола мозга и боковой амиотрофический склероз нередко приводят к полному параличу голосового аппарата и тела. До сих пор стандартом помощи для таких пациентов оставались трекеры движения глаз. Однако они работают крайне медленно, быстро утомляют человека и полностью лишают его невербальных средств самовыражения.
В ходе эксперимента ученые имплантировали тонкие полоски с 253 датчиками электрокортикографии на поверхность моторной коры головного мозга участников с различной степенью нарушений. С помощью алгоритмов машинного обучения исследователи научились считывать команды мозга и передавать их полноразмерному виртуальному аватару на экране компьютера.
Разговор — это гораздо больше, чем просто произносимые слова. Это многослойный, динамичный процесс, в котором задействована вся моторная кора головного мозга. Данное исследование доказывает, что нейроинтерфейсы способны вернуть пациентам свободу и гибкость общения.
Руководитель научной группы, профессор неврологической хирургии Эдвард Чанг подчеркнул, что объединение речи и движений потребовало принципиально нового подхода к анализу мозговой активности.
Почему раздельные алгоритмы не работали
Главным открытием научной работы стало то, что нейронные паттерны при одновременной речи и жестикуляции существенно отличаются от сигналов, когда человек пытается говорить или двигать руками по отдельности. Модели декодирования, настроенные только на изолированные движения, теряли точность при попытке пациента жестикулировать во время фразы.
Нейронная активность мозга при одновременном разговоре и жестикуляции формирует уникальный комбинированный сигнал, требующий предварительного обучения искусственного интеллекта на параллельных сценариях.
Когда исследователи обучили нейросети распознавать именно синхронные намерения пациентов, аватар начал плавно произносить реплики и сопровождать их естественными движениями плеч, рук и мимикой лица.
Перспективы беспроводных нейроинтерфейсов
Несмотря на успешную демонстрацию технологии с участием пациентов, методика пока находится на стадии клинических испытаний. В текущей версии системы электроды соединены с компьютером проводным разъемом через череп, что ограничивает ее повседневное применение вне лаборатории.
Сейчас исследователи работают над созданием миниатюрных беспроводных модулей, полностью скрытых под кожей. Подобные автономные биосовместимые чипы позволят людям с тяжелыми поражениями нервной системы свободно общаться с близкими и возвращаться к активной общественной жизни без проводов и ограничений лабораторных стендов.
📌 Подписывайтесь на Telegram-канал Ertenmedia: коротко о главном, самая актуальная информация здесь!







