Ученые Колумбийского университета (США) разработали систему, способную превращать мысли человека в речь. Контролируя деятельность мозга, она может реконструировать слова, произносимые мысленно с большой ясностью. Результаты работы были опубликованы в журнале Nature.
В прошлом попытки расшифровать сигналы мозга основывались на простых компьютерных моделях, анализировавших спектр звуков, что не привело к конкретным результатам.
Тогда специалисты использовали вокодер — алгоритм, который способен синтезировать речь после обучения по разговорам людей. Такая система используются в Amazon Echo и Apple Siri.
Чтобы научить вокодер «понимать» работу мозга ученые попросили пациентов, страдающих эпилепсией и перенесших операции на головном мозге прослушать фразы разных людей. В это время их мозговая деятельность записывалась для обучения вокодера. Затем пациентам дали послушать цифры от 0 до 9.
В этот момент сигналы мозга также фиксировались для обучения вокодера.
Конечным итогом стал роботизированный голос, повторяющий последовательность числе. Люди смогли понять звуки в 75% случаев, что существенно выше всех прошлых попыток.
В будущем эта разработка может быть использована для практически применимых средств коммуникации.
VK
OK