Китайский стартап NeuroXess совершил два крупных прорыва в области технологии интерфейса мозг-компьютер (BCI), помогая пациенту с повреждением мозга. Первый успех заключается в декодировании мыслей в речь в реальном времени, второй – в дистанционном управлении роботизированной рукой только с помощью мыслей.
В рамках эксперимента, проведённого в августе 2024 года в больнице Хуашань, 21-летней пациентке с эпилепсией и поражением моторной зоны мозга имплантировали гибкое устройство BCI с высокой пропускной способностью и 256 каналами. Благодаря этому интерфейсу удалось регистрировать и анализировать высокочастотные сигналы мозга в диапазоне 70-150 герц, что позволило получить данные о движениях и сенсорной активности.
После тренировки с использованием нейросетевой модели пациентка смогла декодировать речь из сигналов мозга с задержкой менее 60 миллисекунд. Через 48 часов она начала играть в настольный теннис и компьютерные игры, а спустя две недели научилась управлять приложениями на смартфоне, включая WeChat и Taobao.
Интерфейс также позволил пациентке управлять системами умного дома и инвалидной коляской, значительно улучшив её повседневную жизнь. Одним из главных достижений стало декодирование речи из мозговых сигналов, что особенно сложно для китайского языка из-за его тональной и логографической природы.
NeuroXess удалось достичь 71% точности в декодировании речи на основе 142 распространённых китайских слогов с задержкой менее 100 миллисекунд. Этот показатель является рекордным для Китая. Стартап продемонстрировал возможности технологии, показав, как пациентка управляет роботизированной рукой, выполняя жесты и фразы, например, “С Новым годом, 2025!”, а также взаимодействует с цифровым аватаром, который общается с ИИ-моделью.
Основатель NeuroXess Тао Ху отметил, что метод компании минимизирует риск повреждения тканей мозга благодаря работе на поверхности коры. В будущем стартап планирует использовать эту технологию для помощи людям с ограничениями речи и движений, включая пациентов с амиотрофическим склерозом (ALS), параличом и последствиями инсульта.