Nowa metoda syntezy głosowej straciła opóźnienie i wyraża myśli użytkownika w czasie rzeczywistym.
Według Science Alert nowy implant mózgu pozwolił kobiecie, która straciła zdolność mówienia, przekształcić myśli w język w czasie rzeczywistym.
Implant w głowie kobiety analizuje aktywność mózgu w odstępie 80 milisekund i natychmiast zamienia go w zsyntetyzowaną wersję głosu.
Główną różnicą od starych metod jest brak opóźnienia - większość istniejących technologii wymaga przetwarzania całego tekstu przed jego głosem, co powoduje zatrzymanie między tworzeniem myśli a wokalizacją. To sprawiło, że komunikacja jest nienaturalna i spowodowała dyskomfort ze strony użytkowników. Ponadto poprzednie metody wymagały od użytkowników nauczania systemu, naśladowania ruchów podczas brzmienia, co może komplikować ich zastosowanie dla osób z poważnymi zaburzeniami mowy.
Aby rozwiązać te problemy, naukowcy ze Stanów Zjednoczonych przeszkolili sieć neuronową opartą na aktywności sensomotorycznej 47-letniej kory mózgowej. „Mówiła” 100 unikalnych zdań w ciszy, używając ponad 1000 różnych słów.
Głos kobiety został zsyntetyzowany na podstawie zapisów jej poprzedniego przemówienia, co sprawiło, że wynik był bardziej naturalny i blisko jej własnego głosu.
Grupa badawcza przetestowała również wydajność systemu na podstawie 50 fraz z mniejszego zestawu słów. W obu przypadkach średnia szybkość przetłumaczonych słów na minutę była prawie dwa razy wyższa niż w poprzednich analogach.
Zauważono również, że system może interpretować sygnały neuronowe, które reprezentują słowa, do których nie został przeszkolony, co otwiera możliwości dalszej poprawy technologii.
Badanie zostało opublikowane w Nature Neuroscience .
