Проект кафедры истории медицины Московского государственного медико-стоматологического университета им. А.И. Евдокимова

Инженеры переводят мозговые сигналы в речь

31 января 2019

Колумбийские инженеры создали систему, которая переводит мысли человека в понятную и узнаваемую речь.

Исследователи Колумбийского университета обратилась к вокодеру, компьютерному алгоритму, который может синтезировать речь после обучения по записи разговоров людей. Чтобы научить вокодер интерпретировать мозговую деятельность, учёные попросили пациентов, страдающих эпилепсией и уже перенёсших операцию на головном мозге, послушать речь разных людей. В это время специалисты зафиксировали закономерности мозговой активности и использовали эти нейронные паттерны для обучения вокодера. Затем тех же участников эксперимента попросили прослушать записи, в которых голос воспроизводит последовательность цифр от 0 до 9. Записанные в этот момент мозговые сигналы пропустили через вокодер, который смог интерпретировать их и перевести в голосовую запись с помощью нейронных сетей, которые имитируют структуру нейронов в мозге.

Учёные называю своё исследование прорывом, который использует мощь синтезаторов речи и искусственного интеллекта, чтобы привести к новым способам взаимодействия компьютера и мозга. Проект также закладывает основу для помощи людям, которые не могут говорить или восстанавливаются после инсульта.

По материалам сайта Naukatv.ru