Алгоритм не просто запоминает предложения, но и находит закономерности

N+1Hi-Tech

Тренировка на одних фразах помогла нейросети распознать по активности мозга другие

Алиса Бахарева

Joseph Makin, David Moses & Edward Chang / Nature Neuroscience, 2020

Нейросеть обучили распознавать речь по активности коры мозга человека. Алгоритм обучали и тестировали на ограниченном наборе из 50 предложений, точность распознавания в среднем составила 97 процентов. Обучение на дополнительных данных снизило количество ошибок, что говорит о том, что алгоритм не просто запоминает предложения, а находит общие закономерности. Статья опубликована в журнале Nature Neuroscience.

Современные нейроинтерфейсы умеют хорошо расшифровывать активность мозга, которая связана с движениями, — таким образом человек может управлять, например, искусственными конечностями. А вот напрямую переводить электрические сигналы мозга в речь до сих пор было невозможно, поэтому повсеместно используется схема, в которой человек управляет курсором и печатает текст на экране компьютера. Но даже если бы точность контроля курсора была идеальной, говорить таким способом все равно получалось бы очень медленно — максимальная скорость была бы как при печати одним пальцем.

Были и попытки расшифровать речь из активности мозга напрямую, однако пока удавалось понять лишь отдельные фонемы или звуки, а распознать речь, которая состояла из ограниченного набора в 100 слов, ученым удалось с точностью менее 40 процентов.

Ученые из Калифорнийского университета в Сан-Франциско под руководством Джозефа Мэйкина (Joseph Makin) воспользовались методами машинного обучения для того, чтобы расшифровать речь по активности мозга. У четырех добровольцев записывали электрокортикограмму, аналог электроэнцефалограммы, в котором электроды накладывают непосредственно на кору мозга (электроды пациентам установили по медицинским показаниям). Решетка электродов покрывала область коры вокруг боковой борозды — эта зона включает в себя речевые центры.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Паразит из юрского периода подтвердил происхождение скребней от коловраток Паразит из юрского периода подтвердил происхождение скребней от коловраток

Как находка палеонтологов определила систематическое положение скребней

N+1
Небоскребы в степи: зачем туристу ехать в столицу Казахстана Небоскребы в степи: зачем туристу ехать в столицу Казахстана

Нур-Султан пытаются превратить в новый Дубай

РБК
Каким мог стать Ту-204: как советские конструкторы искали идеальный авиалайнер Каким мог стать Ту-204: как советские конструкторы искали идеальный авиалайнер

За 15 лет видение о том, каким должен быть Ту-204, несколько раз менялось

ТехИнсайдер
Из рекламы нижнего белья никуда не делись полуобнаженные девушки Из рекламы нижнего белья никуда не делись полуобнаженные девушки

Полуобнаженные девушки в рекламе остались, зато появилось уважение к чужим телам

GQ
Культурный виноград появился на Сардинии больше трех тысяч лет назад Культурный виноград появился на Сардинии больше трех тысяч лет назад

Самый ранний культурный виноград выращивали на Сардинии

N+1
Прекратите медицинский терроризм. Россия и Иран предлагают Западу снять санкции Прекратите медицинский терроризм. Россия и Иран предлагают Западу снять санкции

Иран и Россия предлагают Западу отказаться от политически мотивированных санкций

СНОБ
Как молодой юрист оставила Москву и уехала под Брянск руководить фермой и пастбищами в 5 000 Га Как молодой юрист оставила Москву и уехала под Брянск руководить фермой и пастбищами в 5 000 Га

Надежда Майер руководит фермой «Мираторга» с поголовьем скота в 4 000 особей

Forbes
Какие футбольные матчи стоит пересмотреть Какие футбольные матчи стоит пересмотреть

Подборка самых эмоциональных футбольных матчей

GQ
«Как вы решите, так и будет»: полная речь Путина, в которой он согласился на обнуление президентских сроков «Как вы решите, так и будет»: полная речь Путина, в которой он согласился на обнуление президентских сроков

Расшифровка выступления Владимира Путина об обнулении его президентского срока

Forbes
«Дети знают, что мама работает блогером» «Дети знают, что мама работает блогером»

Интервью с Валерией Чекалиной, одним из самых успешных блогеров страны

OK!
Ширшасана: стойка на голове Ширшасана: стойка на голове

Ширшасана — королева поз

Yoga Journal
Революция мобильности Революция мобильности

Какое будущее ждёт премиальные и люксовые автомобили в ближайшие годы

Robb Report
Алкогений: Майкл Дуглас Алкогений: Майкл Дуглас

Напиваясь, Дуглас постепенно превращался в несмешную пародию на своих персонажей

Maxim
«Пиноккио, скажи что-нибудь»: каким получился фильм Маттео Гарроне «Пиноккио, скажи что-нибудь»: каким получился фильм Маттео Гарроне

Фильм Маттео Гарроне «Пиноккио» — сказка Карло Коллоди на новый лад

РБК
Нервные и мышечные клетки ускорили развитие друг друга Нервные и мышечные клетки ускорили развитие друг друга

О перспективном исследовании в области создании биогибридов

N+1
«Чума распространилась уже почти по всему королевству»: Сэмюэль Пипс об эпидемии 1665 года в Лондоне «Чума распространилась уже почти по всему королевству»: Сэмюэль Пипс об эпидемии 1665 года в Лондоне

Отрывок о Великой лондонской чуме 1665 года

Forbes
«Я продаю свой «Майбах»: как ресторатор Владимир Перельман спасает бизнес от полного краха «Я продаю свой «Майбах»: как ресторатор Владимир Перельман спасает бизнес от полного краха

Как сохранить костяк команды в кризис?

Forbes
Здесь был Чехов… Здесь был Чехов…

Антон Павлович Чехов и его дом на Грачёвке, ныне Трубной улице

Дилетант
Как Китай возвращается к нормальной жизни после карантина Как Китай возвращается к нормальной жизни после карантина

Спустя 2,5 месяца после вспышки болезни жизнь в Китае приходит в норму

РБК
Что такое апсайклинг и почему вам стоит узнать о нем больше Что такое апсайклинг и почему вам стоит узнать о нем больше

Апсайклинг – один из способов проявить свою осознанность

GQ
Что делает жертву жертвой. Как защититься от абьюзера Что делает жертву жертвой. Как защититься от абьюзера

Памятки и опросники, которые помогут распознать абьюзера

СНОБ
10 женщин, которые влияют на мировой кинематограф прямо сейчас 10 женщин, которые влияют на мировой кинематограф прямо сейчас

Эти женщины активно отвоевывают себе место под солнцем в мировом кинематографе

Forbes
Маленькая хищница: как расплачиваются юные разлучницы Маленькая хищница: как расплачиваются юные разлучницы

Молодая любовница стареющего мужчины - отрицательный фольклорный персонаж

Cosmopolitan
7 сериалов для запойного просмотра во время карантина 7 сериалов для запойного просмотра во время карантина

Что посмотреть из сериальных новинок, когда появилось много свободного времени

Cosmopolitan
Почему дерби между «Спартаком» и ЦСКА – главный матч в российском футболе Почему дерби между «Спартаком» и ЦСКА – главный матч в российском футболе

Слыша «главное московское дерби» сразу понимаешь, о каких командах идет речь

GQ
Они все страдают Они все страдают

Почему все так полюбили непонятные древние картинки со смешными подписями

Вокруг света
Создано «невозможное» соединение металла и водорода Создано «невозможное» соединение металла и водорода

Ученые разработали новые сверхпроводники

Популярная механика
Дуа Липа пришла, чтобы спасти человечество Дуа Липа пришла, чтобы спасти человечество

Рецензия на Future Nostalgia – альбом, с которым вы точно забудете о проблемах

GQ
Как успеть продать компьютер, пока он не стал ненужным хламом? Как успеть продать компьютер, пока он не стал ненужным хламом?

Когда технику можно продать за достойные деньги?

CHIP
Земля в иллюминаторе Земля в иллюминаторе

Российский космонавт-испытатель Олег Артемьев, штатный блогер Роскосмоса

Популярная механика
Открыть в приложении