Neuralink подключила ИИ-агента Grok к нейроинтерфейсу для управления компьютером
Компания Neuralink встроила ИИ-агента Grok в систему управления компьютером через нейроимплант. Человек с боковым амиотрофическим склерозом, который не может двигаться и говорить, может мысленно произнести команду «Эй, Neuralink» и сформулировать задачу. После этого Grok берёт управление операционной системой и выполняет необходимые действия. Прототип проверили во время 72-часовой сессии, которую инженеры компании провели дома у участника исследования по восстановлению речи.
«Разработчики также добавили автоматическое распознавание речевых намерений. Система определяет, когда пользователь пытается заговорить, и передаёт соответствующие сигналы без необходимости нажимать кнопку для начала и окончания записи», — сообщает IXBT News.
Это позволяет управлять коммуникацией без помощи рук. В сочетании с ИИ-агентом такая функция даёт возможность не только набирать текст, но и поручать компьютеру выполнение задач мысленными командами.
Ещё одно направление работы — интеграция нейроинтерфейса с iPhone. Приложение Bloom передаёт синтезированную на основе сигналов мозга речь непосредственно в аудиоканал телефонного звонка. Благодаря этому человек может звонить близким и пользоваться другими функциями смартфона, включая заказ еды. В начале разговора система может автоматически воспроизводить приветствие, объясняющее собеседнику, что звонок совершается с помощью вспомогательного устройства для коммуникации.
Во время тестирования инженеры добавили визуализацию сигналов, поступающих от импланта. Она показывает их интенсивность и распределение, помогая определить, какие мысленно представляемые действия вызывают наиболее выраженную активность мозга. Эти данные нужны для дальнейшего улучшения моделей, которые преобразуют нейронную активность в команды и речь.
Отдельно Neuralink сообщила о результатах работы речевого нейроинтерфейса: в первую неделю использования один из участников испытаний набирал с его помощью 75 английских слов в минуту при доле ошибок на уровне 5,8%. Это ранний результат одного участника, а не показатель, подтверждённый для всех пользователей системы. Проведённая дома 72-часовая сессия позволила инженерам проверить новые функции в повседневной обстановке и определить направления дальнейшей разработки.
Подписывайтесь на наш Telegram-канал, чтобы быть в курсе всех новостей и событий Рунета.
