Новый метод синтеза голоса потерял свою задержку и высказывает мысли пользователя в режиме реального времени.
Новый мозговой имплантат позволил женщине, которая потеряла способность говорить, превратить мысли в реальном языке, согласно науке.
Имплантат в головой женщины анализирует активность мозга с интервалом 80 миллисекунд и мгновенно превращает ее в синтезированную версию голоса.
Основное отличие от старых методов заключается в отсутствии задержки - большинство существующих технологий требуют обработки всего текста до его голоса, что вызывает паузы между формированием мышления и его вокализацией. Это сделало общение неестественным и вызвало дискомфорт со стороны пользователей. Кроме того, предыдущие методы требовали, чтобы пользователи преподавали систему, имитируя движения во время звучания, что может усложнить их использование для людей с серьезными речевыми расстройствами.
Чтобы решить эти проблемы, исследователи из Соединенных Штатов обучили нейронную сеть, основанную на сенсомоторной активности 47-летней коры мозга. Она «говорила» 100 уникальных предложений в тишине, используя более 1000 различных слов.
Голос женщины был синтезирован на основе записей ее предыдущей речи, что сделало результат более естественным и близким к ее собственному голосу.
Исследовательская группа также проверила эффективность системы на основе 50 фраз из меньшего набора слов. В обоих случаях средняя скорость переведенных слов в минуту была почти в два раза выше, чем в предыдущих аналогах.
Также было отмечено, что система может интерпретировать нейронные сигналы, которые представляют слова, которым она не была обучена, что открывает возможности для дальнейшего улучшения технологий.
Исследование опубликовано в Nature Neuroscience .
