A beszéd artikulációs mozgásának predikciója agyi jel alapján - kezdeti eredmények

Csapó Tamás Gábor and Arthur Frigyes Viktor and Nagy Péter and Boncz Ádám: A beszéd artikulációs mozgásának predikciója agyi jel alapján - kezdeti eredmények.

[thumbnail of msznykonf_019_357-368..pdf]
Preview
Cikk, tanulmány, mű
msznykonf_019_357-368..pdf

Download (1MB) | Preview

Abstract

Az augmentatív és alternatív kommunikációs technológiák (pl. agy-gép interfész, BCI) közvetlenül olvashatják az agyi jeleket, hogy pótolják az elvesztett beszédképességet. Nemzetközi szinten végeztek már kezdeti kutatásokat agyi jel (pl. EEG, sEEG, ECoG) és beszéd alapú BCI kidolgozására, azonban hiányoznak azok a kombinált módszerek, amelyek a nem invazív EEG-t, az artikulációt és a beszédjeleket összevontan vizsgálnák, és elemeznék az agyban zajló tervezési folyamat, az artikulációs mozgás, és a keletkezett beszédjel kölcsönhatását. A jelen kutatásban ismertetett multimodális (EEG, nyelvultrahang és beszéd) analízis és szintézis révén túlmutatunk a legkorszerűbb nemzetközi trendeken. A beszéd közbeni agyi jelek elemzését nyelvultrahang-alapú artikulációs adatokkal bővítjük, hogy több összehasonlítható bioszignál álljon rendelkezésre. Az EEG-vel mért agyi jelből mély neuronhálóval az artikulációs mozgásra vonatkozó információt (nyelvultrahang képek) prediktálunk. Az eredmények szerint az EEG és nyelvultrahang közötti kapcsolat kimutatható. A jelen kutatás hosszútávú célja, hogy hozzájáruljunk a beszéd alapú agyszámítógép interfészekhez: az eredmények potenciálisan alkalmazhatók lehetnek pl. beszédsérülteknek szánt kommunikációs segédeszközként.

Item Type: Conference or Workshop Item
Journal or Publication Title: Magyar Számítógépes Nyelvészeti Konferencia
Date: 2023
Volume: 19
ISBN: 978-963-306-912-7
Page Range: pp. 357-368
Language: Hungarian
Place of Publication: Szeged
Event Title: Magyar számítógépes nyelvészeti konferencia (19.)
Event Type: Conference
Event Location: Szeged
Event Dates: 2023. január 26-27.
Related URLs: https://acta.bibl.u-szeged.hu/78307/
Uncontrolled Keywords: Nyelvészet - számítógép alkalmazása, Beszédtechnológia, Ultrahang
Additional Information: Bibliogr.: p. 366-368. ; ill. ; összefoglalás magyar nyelven
Subjects: 01. Natural sciences
01. Natural sciences > 01.02. Computer and information sciences
Date Deposited: 2023. Mar. 16. 10:45
Last Modified: 2023. Mar. 16. 10:45
URI: http://acta.bibl.u-szeged.hu/id/eprint/78425

Actions (login required)

View Item View Item