"Az invazív medvék nem tolerálják a suzukis agressziót" : magyar GPT-2 kísérleti modell

Yang Zijian Győző: "Az invazív medvék nem tolerálják a suzukis agressziót" : magyar GPT-2 kísérleti modell. In: Magyar Számítógépes Nyelvészeti Konferencia, (18). pp. 463-476. (2022)

Cikk, tanulmány, mű msznykonf_018_463-476.pdf Download (341kB)

Abstract

A GPT-2 egy kizárólag dekóderrel rendelkező autoregresszív transzformer modell, amely elsősorban szöveggeneráló feladatokra alkalmas. A kutatásomban betanítottam egy kísérleti GPT-2 modellt magyar nyelvre, majd azt tovább finomhangoltam különböző nyelvtechnológiai feladatokra. A kísérleteimben az előtanított GPT-2 modellemet mondatszintű és tokenszintű szövegosztályozás, absztraktív szövegösszefoglaló generálás, hírgenerálás és versgenerálás feladatokra finomhangoltam. Az eredmények alapján a GPT-2 kevésbé teljesít jól szövegosztályozás feladatokra. Absztraktív szövegösszegzés feladatában versenyképes eredményeket ért el, azonban a szöveggenerálás eredményei még érdekesebbek. A GPT-2 modellemmel létrehoztam egy hír- és egy versgenerátort.

Item Type:	Article
Heading title:	Poszter, laptopos bemutató
Journal or Publication Title:	Magyar Számítógépes Nyelvészeti Konferencia
Date:	2022
Volume:	18
ISBN:	978-963-306-848-9
Page Range:	pp. 463-476
Language:	Hungarian
Place of Publication:	Szeged
Event Title:	Magyar számítógépes nyelvészeti konferencia (18.) (2022) (Szeged)
Related URLs:	http://acta.bibl.u-szeged.hu/75797/
Uncontrolled Keywords:	Nyelvészet - számítógép alkalmazása
Additional Information:	Bibliogr.: p. 474-476. és a lábjegyzetekben ; összefoglalás magyar nyelven
Subjects:	01. Natural sciences 01. Natural sciences > 01.02. Computer and information sciences 06. Humanities 06. Humanities > 06.02. Languages and Literature
Date Deposited:	2022. May. 25. 13:04
Last Modified:	2022. May. 25. 13:04
URI:	http://acta.bibl.u-szeged.hu/id/eprint/75893

Actions (login required)

View Item