Исследователи создали мозговой имплант, который декодирует мысли в синтезированную речь
- Имплант преобразует сигналы мозга в текст со скоростью почти 80 слов в минуту, фокусируясь на фонемах, а не на целых словах, для повышения скорости.
- ИИ через цифровой аватар генерирует реалистичный вокал (отражает голос пациента до травмы) и лицевую анимацию, которые призваны обеспечить более естественное общение.
- Этот прорыв приближает технологию к реальному использованию, а следующим шагом станет беспроводная модель, не требующая физического подключения к интерфейсу.
Восстановление общения для людей с параличом - это инновация, которая изменит бесчисленное количество жизней.
Хотя это звучит безумно, импланты, читающие мысли, похоже, постепенно приближаются к реальности.
Комментарии:
Нейроинтерфейсы не читают мысли, что бы ими управлять, нужно делать это направленно и тренироваться.
***
В речевые центры мозга запихивают пачку датчиков, которые считывают электрическую активность мозга. На выходе датчиков - жуткое месиво из сигналов, хер поймёшь что за что отвечает. И вот уже дальше в дело вступает основная нейронка, которая классифицирует эти сигналы и приводит их к какому то удобоваримому виду. Здесь и обучать нейронку на конкретном пациенте поди нужно. А дальше ещё нейроночки, которые уже обрабатывают в складный текст и озвучивают всё это добро.
Много лет назад таким образом курсором могли двигать, а сейчас вот уже чего поинтереснее. Осталось придумать безопасный и простой в установке/эксплуатации интерфейс и будет прям огонь. Ведь ничего не мешает человеку думать не речью, а скажем командами для того же курсора, обучить для этого нейросеть и вуаля, кроме разговора, мы ещё и компухтером управляем) Это ж почти киберпанк!
***
в посте написанно что нейросеть обрабатывает фонем, а не слова. Учить такую систему нужно, и опять же как вы говорите я видел как с помощью нейроинтефейса играют то ли в Марио, то ли в подобную игру, в общем нужно было научить систему что мысль о прыжке означает прыжок. Думаю что тут такая же система, только не нужно думать слово "мама" думаешь "ма" а нейросеть уже подбирает какие слова на "ма" могут быть, думаешь "мы" и нейросеть уже догадывается что будет "мама мыла раму".
***
Для печати текста есть принцип калибровки:
1) На экране "А" - думай про букву А. Железо считает сигнатуру (мозг «светится» по разному на разных мыслях).
2) На экране "Б" - думаем
3) Еще по кругу калибровка
4) Проверка
5) Еще и еще (а ей спешить некуда)
=>
Думаем про Х - печатается Х
Думаем про У - печатается У
...
Простые действия массово отработаны.
С фразами или очень долго и только 100 основных фраз, или они мега-прорыв совершили(вряд ли). В любом случае пусть прокачиваются. Рано или поздно принесут пользу