Темы



Neuralink подключила ИИ-агента Grok к нейроинтерфейсу для управления компьютером силой мысли

Коротко сгенерировано ИИ по тексту статьи
  • Neuralink подключила Grok к нейроимпланту: пользователь с БАС может мысленной командой поручить агенту управлять операционной системой.
  • Автораспознавание речевых намерений работает без кнопки записи; приложение Bloom передаёт синтезированную речь в аудиоканал звонка iPhone.
  • За первую неделю один участник набирал 75 английских слов в минуту при ошибках 5,8%; результат не подтверждён для всех пользователей.

Почему это важно: Домашняя 72-часовая сессия позволила проверить новые функции в повседневной обстановке и определить дальнейшие направления разработки.

Neuralink встроила ИИ-агента Grok в систему управления компьютером через нейроимплант. Человек с боковым амиотрофическим склерозом (БАС), утративший возможность самостоятельно двигаться и говорить, может мысленно произнести команду «Эй, Neuralink», сформулировать задачу, после чего Grok берёт управление операционной системой и выполняет необходимые действия. Прототип проверили во время 72-часовой сессии, которую инженеры компании провели дома у участника исследования по восстановлению речи.

Разработчики также добавили автоматическое распознавание речевых намерений. Система определяет, когда пользователь пытается заговорить, и передаёт соответствующие сигналы без необходимости нажимать кнопку для начала и окончания записи. Это позволяет управлять коммуникацией без помощи рук. В сочетании с ИИ-агентом такая функция открывает возможность не только набирать текст, но и поручать компьютеру выполнение задач мысленными командами.

Neuralink подключила ИИ-агента Grok к нейроинтерфейсу для управления компьютером силой мысли
Источник изображения: Neuralink

Ещё одно направление работы — интеграция нейроинтерфейса с iPhone. Приложение Bloom передаёт синтезированную на основе сигналов мозга речь непосредственно в аудиоканал телефонного звонка. Благодаря этому человек может звонить близким, а также пользоваться другими функциями смартфона, в том числе заказывать еду. В начале разговора система может автоматически воспроизводить приветствие, объясняющее собеседнику, что звонок совершается с помощью вспомогательного устройства для коммуникации.

An Engineering Sprint For Speech Restoration | Neuralink

Во время тестирования инженеры добавили визуализацию сигналов, поступающих от импланта. Она показывает их интенсивность и распределение, помогая определить, какие мысленно представляемые действия вызывают наиболее выраженную активность мозга. Эти данные нужны для дальнейшего улучшения моделей, которые преобразуют нейронную активность в команды и речь.

Отдельно Neuralink сообщила о результатах работы речевого нейроинтерфейса: в первую неделю использования один из участников испытаний набирал с его помощью 75 английских слов в минуту при доле ошибок на уровне 5,8%. Это ранний результат одного участника, а не показатель, подтверждённый для всех пользователей системы.

Проведённая дома 72-часовая сессия позволила инженерам проверить новые функции в повседневной обстановке и определить направления дальнейшей разработки.

©  iXBT

Об этом также пишут