Содержание
Brain2Qwerty от Meta научился переводить мысленный набор текста в нажатия клавиш с точностью 61% в среднем. Это вторая версия неинвазивного мозг-компьютерного интерфейса, который считывает активность мозга без импланта.
Идея звучит почти как сцена из киберпанка, но подход тут приземленный. Система не вживляет электроды, как Neuralink и часть других BCI-проектов. Вместо этого Meta использует магнитоэнцефалографию, или MEG, чтобы ловить слабые изменения магнитных полей мозга.
Дальше алгоритм сопоставляет эти сигналы с нажатиями на виртуальной клавиатуре. Человек как бы набирает текст мысленно, а система пытается понять, какие клавиши он выбрал.
Точность Brain2Qwerty выросла после обучения на большем объеме данных
Вторая версия Brain2Qwerty заметно обошла первую по точности: Meta обучила систему на десятикратно большем объеме данных для каждого участника тестов. Средняя точность распознавания слов выросла с 40% до 61%, а лучший участник дошел до 78%.
| Параметр | Первая версия | Вторая версия |
|---|---|---|
| Средняя точность слов | 40% | 61% |
| Лучший результат участника | 48% | 78% |
| Обучающие данные | Базовый набор | В 10 раз больше на участника |
| Статус | Proof of concept | Исследовательская версия |
Для лабораторного прототипа прирост сильный. Для реального общения — пока нет. 61% означает, что система ошибается слишком часто. Такой ввод текста раздражал бы даже в мессенджере, не говоря уже о медицинском устройстве для людей с потерей подвижности.
Meta прямо признает, что Brain2Qwerty еще не готов к клиническим испытаниям. Компания планирует обучать модель на большем массиве данных и уже видит постепенное улучшение результатов. Страницу проекта Meta ведет отдельно: Brain2Qwerty.
MEG не требует операции, но требует огромный сканер
Главное отличие Brain2Qwerty от Neuralink — отсутствие хирургии. Импланты считывают сигнал ближе к источнику, но ради этого пациенту нужна операция. MEG работает снаружи, зато платит за это размерами и чувствительностью оборудования.
Современный MEG-сканер — не шапочка из фантастики. Это массивная установка, которая больше человека и кресла, в котором он сидит. Такой аппарат сложно представить дома или в обычной палате.
Но направление не закрыто. В MEG-сенсорах идут разработки, которые могут уменьшить размеры оборудования. Если железо станет компактнее, неинвазивные BCI получат более понятный путь в клиники.
Neuralink, Georgia Tech и Valve ищут другие пути к BCI
Meta не одна пытается сделать мозг-компьютерный интерфейс удобнее для пациентов. Neuralink и несколько стартапов годами работают с имплантами, чтобы люди с утраченной подвижностью управляли компьютером мыслями.
Есть и промежуточные варианты. Команда Georgia Tech разработала крошечный BCI, который можно разместить под кожей головы. Это все еще вмешательство, но не такой сценарий, как глубокая установка сенсоров.
Гейб Ньюэлл, основатель Valve, тоже вложился в тему BCI. Его стартап работает над интерфейсом, которому не нужна батарея. Для индустрии игр это звучит эффектно, но медицинские сценарии тут важнее: набор текста, управление компьютером, связь с близкими.
До управления веб-камерой или рейда в World of Warcraft через одну мысль Meta еще далеко. По данным Meta, клинические испытания Brain2Qwerty пока не планируются: средняя точность держится на 61%, а MEG-сканер остается крупнее пользователя и кресла.