A beszéd artikulációs mozgásának predikciója agyi jel alapján - kezdeti eredmények

Csapó Tamás Gábor; Arthur Frigyes Viktor; Nagy Péter; Boncz Ádám: A beszéd artikulációs mozgásának predikciója agyi jel alapján - kezdeti eredmények.

Előnézet

Cikk, tanulmány, mű msznykonf_019_357-368..pdf Letöltés (1MB) | Előnézet

Absztrakt (kivonat)

Az augmentatív és alternatív kommunikációs technológiák (pl. agy-gép interfész, BCI) közvetlenül olvashatják az agyi jeleket, hogy pótolják az elvesztett beszédképességet. Nemzetközi szinten végeztek már kezdeti kutatásokat agyi jel (pl. EEG, sEEG, ECoG) és beszéd alapú BCI kidolgozására, azonban hiányoznak azok a kombinált módszerek, amelyek a nem invazív EEG-t, az artikulációt és a beszédjeleket összevontan vizsgálnák, és elemeznék az agyban zajló tervezési folyamat, az artikulációs mozgás, és a keletkezett beszédjel kölcsönhatását. A jelen kutatásban ismertetett multimodális (EEG, nyelvultrahang és beszéd) analízis és szintézis révén túlmutatunk a legkorszerűbb nemzetközi trendeken. A beszéd közbeni agyi jelek elemzését nyelvultrahang-alapú artikulációs adatokkal bővítjük, hogy több összehasonlítható bioszignál álljon rendelkezésre. Az EEG-vel mért agyi jelből mély neuronhálóval az artikulációs mozgásra vonatkozó információt (nyelvultrahang képek) prediktálunk. Az eredmények szerint az EEG és nyelvultrahang közötti kapcsolat kimutatható. A jelen kutatás hosszútávú célja, hogy hozzájáruljunk a beszéd alapú agyszámítógép interfészekhez: az eredmények potenciálisan alkalmazhatók lehetnek pl. beszédsérülteknek szánt kommunikációs segédeszközként.

Mű típusa:	Konferencia vagy workshop anyag
Befoglaló folyóirat/kiadvány címe:	Magyar Számítógépes Nyelvészeti Konferencia
Dátum:	2023
Kötet:	19
ISBN:	978-963-306-912-7
Oldalak:	pp. 357-368
Nyelv:	magyar
Kiadás helye:	Szeged
Konferencia neve:	Magyar számítógépes nyelvészeti konferencia (19.)
Konferencia típusa:	Konferencia
Helyszin:	Szeged
Dátum:	2023. január 26-27.
Befoglaló mű URL:	https://acta.bibl.u-szeged.hu/78307/
Kulcsszavak:	Nyelvészet - számítógép alkalmazása, Beszédtechnológia, Ultrahang
Megjegyzések:	Bibliogr.: p. 366-368. ; ill. ; összefoglalás magyar nyelven
Szakterület:	01. Természettudományok 01. Természettudományok > 01.02. Számítás- és információtudomány
Feltöltés dátuma:	2023. már. 16. 10:45
Utolsó módosítás:	2023. már. 16. 10:45
URI:	http://acta.bibl.u-szeged.hu/id/eprint/78425

Bővebben:

Tétel nézet