Szabó Gergő; Orosz György; Szántó Zsolt; Berkecz Péter; Farkas Richárd: Transformer-alapú HuSpaCy előelemző láncok.
Előnézet |
Cikk, tanulmány, mű
msznykonf_019_305-317..pdf Letöltés (517kB) | Előnézet |
Absztrakt (kivonat)
Évről évre jelennek meg egyre pontosabb nyílt forráskódú természetes-nyelvfeldolgozó transformer-alapú nyelvi modellek. Viszont ezekre épülő, kifejezetten magyar nyelvre fejlesztett előelemző lánc, ami tartalmaz tokenizálást, mondatra bontást, lemmatizálást, szófaji egyértelműsítést, morfológiai címkézést, függőségi elemzést és névelem-felismerést, idáig nem létezett. Dolgozatunkban bemutatunk egy, a fent említett feladatokat megvalósító transformer-alapú előelemző láncot, amit több különböző magyarra elérhető nyelvi modellel is teszteltünk. Az elkészült rendszer a feladatok nagy részében state-of-the-art eredményeket ért el. Arra is kellő figyelmet fordítottunk, hogy megvizsgáljunk különböző erőforrás-igényű lehetőségeket és bemutassunk olyan módszereket, amelyekkel a leghatékonyabbnak bizonyult rendszerek memóriahasználata csökkenthető.
| Mű típusa: | Konferencia vagy workshop anyag |
|---|---|
| Befoglaló folyóirat/kiadvány címe: | Magyar Számítógépes Nyelvészeti Konferencia |
| Dátum: | 2023 |
| Kötet: | 19 |
| ISBN: | 978-963-306-912-7 |
| Oldalak: | pp. 305-317 |
| Nyelv: | magyar |
| Kiadás helye: | Szeged |
| Konferencia neve: | Magyar számítógépes nyelvészeti konferencia (19.) |
| Konferencia típusa: | Konferencia |
| Helyszin: | Szeged |
| Dátum: | 2023. január 26-27. |
| Befoglaló mű URL: | https://acta.bibl.u-szeged.hu/78307/ |
| Kulcsszavak: | Nyelvészet - számítógép alkalmazása |
| Megjegyzések: | Bibliogr.: p. 315-317. ; ill. ; összefoglalás magyar nyelven |
| Szakterület: | 01. Természettudományok 01. Természettudományok > 01.02. Számítás- és információtudomány |
| Feltöltés dátuma: | 2023. már. 16. 09:38 |
| Utolsó módosítás: | 2023. már. 16. 09:38 |
| URI: | http://acta.bibl.u-szeged.hu/id/eprint/78421 |
 |
Tétel nézet |
