Forskere har laget et system som avkoder hjernesignaler og gjør dem til tale. På denne måten kan du finne ut hva emnet sier uten å høre ordene hans. Over tid kan slike enheter bli talesynteser for de stumme.
Prestasjonen er beskrevet i en vitenskapelig artikkel publisert i tidsskriftet Nature Neuroscience.
I flere år nå har forskjellige forskningsgrupper laget systemer som forvandler bildet av hjerneaktivitet til ord, og faktisk erstatter det menneskelige taleapparatet. Tidligere arbeider omhandlet imidlertid vanligvis koblingen av hjernesignaler med bevegelsene til orgelene i tale eller talte lyder.
Forskere ved University of California, San Francisco, bestemte seg for å ta en snarvei. Designet deres kartlegger nevrale signaler direkte til setninger. For å gjøre dette tilpasset de algoritmene som ble brukt i maskinoversettelse fra ett språk til et annet. I dette tilfellet løses et lignende problem. Hjernen som oppfatter tale, oversetter den til språket i den elektriske aktiviteten. Oppgaven til kunstig intelligens er å utføre omvendt oversettelse.
Forskerne tilpasset tilnærmingen som ble brukt for maskinoversettelse for å avkode nevrale signaler. Oversettelse av Vesti. Nauka.
Eksperimentet involverte fire kvinner med epilepsi. Tidligere introduserte leger dem for medisinske formål i hjernen på rundt 250 elektroder, som nå har tjent til fordel for vitenskapen.
Alle emner leser et sett med fraser. På dette tidspunktet registrerte elektroder aktiviteten til hjernen deres assosiert med leppebevegelser, uttale av vokaler og konsonanter og andre parametere.
Da kom tre kunstige nevrale nettverk inn. De første fremhevet mønstre i hvordan signalet fra elektrodene endret seg over tid. Den andre transformerte resultatet av den første til spesielle matematiske strukturer (maler). Til slutt gjorde den tredje dem til tekst på engelsk.
Salgsfremmende video:
Deltakerne i eksperimentet gjentok hver av 30-50 setningene to ganger. Reaksjonen fra nervecellene på den første ytringen av frasen tjente til å trene systemet, og til den andre ytringen for å teste dets ferdigheter.
Som et resultat var systemet feil 3% av tiden. Dette er et veldig godt resultat for denne typen utvikling.
Riktignok var ordforrådet til setningene som ble brukt begrenset til 250 ord. Men aller først, og dette er mye for mennesker som i dag ikke kan uttale eller skrive noe som helst på grunn av lammelse. Og for det andre fortsetter spesialistene.
Forfatter: Anatoly Glyantsev
