нейроинтерфейс

Исследователи хотят научить нейросеть преобразовывать мысли в текст используя неинвазивные данные активности мозга, привлекая тысячи разных людей. Как утверждает компания, это крупнейший на сегодня нейроязыковой датасет такого рода. Цель исследований - уловить смысл того, что человек собирается сказать или напечатать, за секунды до того, как он это сделает. Участники приходят в студийное помещение и проводят там двухчасовые сессии. Каждый сидит в небольшой кабинке и общается с языковой моделью, либо голосом, либо через упрощённую клавиатуру без некоторых клавиш. Изначально Conduit пробовали строгие задания, но быстро заметили закономерность, что чем живее диалог, тем лучше данные. В итоге компания перешла к персонализированным разговорам в формате вопрос-ответ. Компания пытается выжать максимум естественной речи и текста, при этом точно синхронизировав нейросигналы, звук и ввод символов. Без этого модель просто не сможет понять, какой кусок мозговой активности относится к какому смыслу. Готовых устройств под такие задачи на рынке не нашлось, поэтому Conduit сделала всё сама. Команда собрала кастомные гарнитуры, объединив ЭЭГ, оптические датчики и другие сенсоры в корпусах, напечатанных на 3D-принтере. Сначала в Conduit были уверены, что главная проблема неудачных записей - помехи и грязный сигнал. Чтобы данные были максимально чистыми, они изолировали оборудование, возились с питанием и в итоге даже полностью отказались от розеток, переведя студию на аккумуляторы. Всё ради того, чтобы убрать фоновый электрический шум, который мешает считывать сигналы мозга. Но в итоге сессии стали срываться, техника работала нестабильно, а тяжёлые батареи приходилось постоянно менять и обслуживать. Но когда данных стало действительно много, оказалось, что стерильность сигнала уже не так важна. Модели начали нормально работать даже с небольшими помехами и лучше понимать людей в целом, а не конкретные условия записи. Сейчас Conduit почти полностью сосредоточена на обучении моделей и не спешит раскрывать детали того, как именно устроено декодирование мыслей в текст. Эти подробности обещают опубликовать позже.

Создан неинвазивный интерфейс «мозг — компьютер», дополненный искусственным интеллектом, который позволяет пользователям управлять роботизированной рукой или курсором с большей точностью и скоростью. Система преобразует сигналы мозга, полученные с помощью ЭЭГ, в команды для управления движением, а камера с искусственным интеллектом интерпретирует намерения пользователя в режиме реального времени.

https://neurosciencenews.com/ai-bci-movement-neurotech-29649/