ИИ может расшифровать, что слышит и видит мозг, и превратить в поток текста
Это еще не чтение мыслей, но серьезный шаг в этом направлении
Исследователи из Техасского университета в Остине разработали систему ИИ, которую они назвали «семантическим декодером». Система может преобразовывать активность мозга человека — во время прослушивания истории или просмотра видео — в непрерывный поток текста. Ученые считают, что система может помочь людям, которые находятся в сознании, но физически не могут говорить.
Семантический декодер, разработанный учеными из Техасского университета в Остине, может преобразовывать активность мозга в непрерывный поток текста. Ученые считают, что такая система помочь людям, которые находятся в сознании, но не могут говорить физически, например, тем, кто пострадал от инсульта.
Работа опирается на модель (трансформенная технология), подобную той, что используются в системах ChatGPT компании Open AI и Bard компании Google.
В отличие от других систем декодирования, эта система не требует установки имплантатов в мозг, то есть она является неинвазивной. Участникам также не нужно использовать слова только из заранее утвержденного списка. Активность мозга измеряется с помощью фМРТ-сканера. Сначала семантический декодер обучается, пока человек прослушивает в сканере многочасовые подкасты, а сканер снимает показания мозга. После такого обучения, когда участник прослушивает новую историю или смотрит видео, машина создает текст исключительно на основе активности мозга.
Результат не является расшифровкой слово в слово. Вместо этого исследователи разработали декодер таким образом, чтобы он улавливал суть сказанного или продуманного. Пока ему это удается не всегда. Но примерно в половине случаев, отслеживая активность мозга участника, машина выдает текст близко (а иногда и точно) соответствующий смыслу исходных слов.