Инженеры переводят мозговые сигналы в речь
31 января 2019
Колумбийские инженеры создали систему, которая переводит мысли человека в понятную и узнаваемую речь.
Исследователи Колумбийского университета обратилась к вокодеру, компьютерному алгоритму, который может синтезировать речь после обучения по записи разговоров людей. Чтобы научить вокодер интерпретировать мозговую деятельность, учёные попросили пациентов, страдающих эпилепсией и уже перенёсших операцию на головном мозге, послушать речь разных людей. В это время специалисты зафиксировали закономерности мозговой активности и использовали эти нейронные паттерны для обучения вокодера. Затем тех же участников эксперимента попросили прослушать записи, в которых голос воспроизводит последовательность цифр от 0 до 9. Записанные в этот момент мозговые сигналы пропустили через вокодер, который смог интерпретировать их и перевести в голосовую запись с помощью нейронных сетей, которые имитируют структуру нейронов в мозге.
Учёные называю своё исследование прорывом, который использует мощь синтезаторов речи и искусственного интеллекта, чтобы привести к новым способам взаимодействия компьютера и мозга. Проект также закладывает основу для помощи людям, которые не могут говорить или восстанавливаются после инсульта.
По материалам сайта Naukatv.ru