Hjärnimplantat, AI och en talsyntes har förvandlat hjärnaktivitet till robotord

Kategori: Människor och teknik Postad 29 jan

Neurala nätverk har använts för att förvandla ord som en människa har hört till ett begripligt, igenkännbart tal. Det kan vara ett steg mot teknik som en dag kan avkoda människors tankar.

En utmaning: Tack vare fMRI-skanning har vi känd i decennier att när människor pratar, eller hör andra, aktiverar det specifika delar av deras hjärna. Men det har visat sig vara enormt utmanande att översätta tankar till ord. Ett team från Columbia University har utvecklat ett system som kombinerar djupinlärning med en talsyntes för att göra just det.

Studien: Teamet placerade tillfälligt elektroder i hjärnan på fem personer som skulle genomgå en hjärnoperation för epilepsi. (Människor som har denna procedur får ofta implantat monterade för att lära sig mer om sina anfall.) Volontärerna ombads lyssna på inspelningar av meningar, och deras hjärnaktivitet användes för att träna djupinlärningsbaserad taligenkänningsprogramvara. Sedan lyssnade de på 40 nummer som talades. AI:n försökte avkoda vad de hade hört på grundval av deras hjärnaktivitet – och talade sedan högt upp resultaten med en robotröst. Vad röstsyntesen producerade var förståeligt som det rätta ordet 75 % av gångerna, enligt volontärer som lyssnade på det. Resultaten publicerades i Vetenskapliga rapporter idag (och du kan lyssna på inspelningarna här .)

Siktet? För tillfället kan tekniken bara återge ord som dessa fem patienter har hört – och den skulle inte fungera på någon annan. Men det finns en förhoppning om att teknik som denna en dag kan låta människor som har blivit förlamade kommunicera med sin familj och sina vänner, trots att de förlorar förmågan att tala.

(För fler artiklar som denna, varför inte registrera dig för vårt dagliga nyhetsbrev, The Download.)