- Naukowcy opracowali nieinwazyjny system sztucznej inteligencji, który koncentruje się na tłumaczeniu aktywności mózgu osoby na strumień tekstu.
- System, zwany dekoderem semantycznym, może przynieść korzyści pacjentom, którzy utracili zdolność do fizycznego komunikowania się.
- Po przeszkoleniu systemu AI może generować strumień tekstu, gdy uczestnik słucha lub wyobraża sobie nową historię.
Alex Huth (po lewej), Shelly Jin (w środku) i Jerry Tang (po prawej) przygotowują się do zbierania danych o aktywności mózgu w Centrum Obrazowania Biomedycznego Uniwersytetu Teksańskiego w Austin. Naukowcy przeszkolili swój semantyczny dekoder na dziesiątkach godzin danych dotyczących aktywności mózgu uczestników, zebranych w skanerze fMRI.
Zdjęcie: Nolan Zink/Uniwersytet Teksasu w Austin.
Naukowcy opracowali nieinwazyjny system sztucznej inteligencji, który koncentruje się na tłumaczeniu aktywności mózgu danej osoby na ciąg tekstów, zgodnie z recenzowanym badaniem opublikowanym w poniedziałek w czasopiśmie. Naturalna neuronauka.
System, zwany dekoderem semantycznym, może przynieść korzyści pacjentom, którzy utracili zdolność do fizycznego komunikowania się po udarze, porażeniu lub innych chorobach zwyrodnieniowych.
Naukowcy z University of Texas w Austin opracowali system częściowo przy użyciu modelu transformatora, podobnego do tych, które napędzają chatbota Google Bard i ChatGPT OpenAI.
Uczestnicy badania trenowali dekoder, słuchając kilkugodzinnych podcastów w skanerze fMRI, który jest dużym urządzeniem mierzącym aktywność mózgu. System nie wymaga żadnych implantów chirurgicznych.
doktorat Student Jerry Tang przygotowuje się do zbierania danych o aktywności mózgu w Centrum Obrazowania Biomedycznego Uniwersytetu Teksańskiego w Austin.
Zdjęcie: Nolan Zink/Uniwersytet Teksasu w Austin.
Po przeszkoleniu system AI może generować strumień tekstu, gdy uczestnik słucha lub wyobraża sobie nową historię. Wynikowy tekst nie jest dokładnym tekstem, ale został zaprojektowany przez badaczy z zamiarem uchwycenia ogólnych myśli lub idei.
Według komunikatu prasowego, Wyszkolony system tworzy tekst, który najbardziej lub najdokładniej odpowiada zamierzonemu znaczeniu oryginalnych słów uczestnika w mniej więcej połowie czasu.
Na przykład, gdy uczestnik usłyszał podczas eksperymentu „Nie mam jeszcze prawa jazdy”, myśli zostały przetłumaczone na „Ona nawet nie zaczęła jeszcze uczyć się jeździć”.
„Dla nieinwazyjnej metody jest to prawdziwy krok naprzód w porównaniu z tym, co zrobiono wcześniej, co zwykle składało się z pojedynczych słów lub krótkich zdań” – powiedział Alexander Huth, jeden z liderów badania. „Otrzymujemy model dekodowania języka, który trwa przez długi czas ze złożonymi pomysłami”.
Uczestnicy zostali również poproszeni o obejrzenie czterech klipów wideo bez dźwięku w skanerze, a system sztucznej inteligencji był w stanie dokładnie opisać z nich „pewne zdarzenia”, zgodnie z wydaniem.
Od poniedziałku dekoder nie może być używany poza laboratorium, ponieważ opiera się na skanerze fMRI. Ale naukowcy są przekonani, że ostatecznie można go zastosować w bardziej przenośnych systemach obrazowania mózgu.
Wiodący badacze w badaniu złożyli wniosek patentowy na tę technologię w ramach PCT.
„Odkrywca. Nieprzepraszający przedsiębiorca. Fanatyk alkoholu. Certyfikowany pisarz. Wannabe tv ewangelista. Fanatyk Twittera. Student. Badacz sieci. Miłośnik podróży.”
