| Form of studies |
Bachelor |
| Title of the study programm |
Computer Systems |
| Title in original language |
Automātiska eksāmenu jautājumu ģenerēšana studiju kursam “Diskrētās struktūras datorzinātnē”, izmantojot valodu modeļus |
| Title in English |
Automated Generation of Exam Questions for Study Course “Discrete Structures in Computer Science” Using Language Models |
| Department |
Faculty Of Computer Science Information Tehnology And Energy |
| Scientific advisor |
Vita Šakele |
| Reviewer |
Alla Anohina-Naumeca |
| Abstract |
Augstas kvalitātes vērtēšanas jautājumu sagatavošana augstākajā izglītībā ir resursi-etilpīgs process, jo īpaši datorzinātņu studiju kursos, kuros būtiska nozīme ir loģiskajam pareizumam, vienotai struktūrai un tematiski pilnīgam pārklājumam. Šajā bakalaura darbā tiek pētīta lielo valodas modeļu (LLM) izmantošana akadēmis-ko jautājumu–atbilžu pāru automatizētai ģenerēšanai un validācijai. Darba mērķis ir izstrādāt, realizēt un eksperimentāli novērtēt programmatūras prototipu, kas atbalsta mācībspēkus un studiju palīgus vērtēšanas jautājumu ģenerēšanā un pārbaudē strukturētā un reproducējamā veidā.
Tika izstrādāts modulārs programmatūras prototips, kas nodrošina uz uzvednēm balstītu jautājumu ģenerēšanu, atbalsta materiālu atkārtotu izmantošanu un sis-temātisku ģenerēto rezultātu validāciju. Sistēma integrē vairākus mūsdienīgus lielos valodas modeļus, izmantojot to oficiālās lietojumprogrammu saskarnes (API), un nodrošina kontrolētus eksperimentus bez lokālas modeļu izvietošanas. Eksperi-mentālā novērtēšana tika veikta, izmantojot fiksētu uzvedņu un jautājumu kopu, salīdzinot modeļus pēc ģenerēšanas pareizuma, validācijas precizitātes, atbildes laika un tokenu patēriņa. Iegūtie rezultāti liecina, ka visi analizētie modeļi spēj ģenerēt izmantojamus vērtēšanas jautājumus, tomēr pastāv būtiskas atšķirības efek-tivitātē, loģiskajā spriešanā un validācijas kvalitātē. Daži modeļi ir piemērotāki jautājumu ģenerēšanai, savukārt citi demonstrē augstāku uzticamību validācijas uz-devumos.
Darba rezultāti apliecina, ka lielie valodas modeļi var efektīvi atbalstīt izglītības jautājumu ģenerēšanu, ja tie tiek kombinēti ar strukturētām uzvednēm un validācijas darbplūsmām. Izstrādātais prototips demonstrē lielo valodas modeļu praktisko in-tegrējamību akadēmiskās vērtēšanas sagatavošanas procesos, vienlaikus uzsverot rūpīgas modeļu izvēles nozīmi, balstoties uz konkrētā uzdevuma prasībām.
Darba apjoms ir 62 lappuses, tajā ir 11 attēli un 5 pielikumi, kā arī izmantoti 45 lit-eratūras avoti. |
| Keywords |
lielie valodas modeļi, automatizēta jautājumu ģenerēšana, zināšanu vērtēšana, ar izgūšanu papildināta ģenerēšana, modeļu novērtēšana |
| Keywords in English |
large language models, automated question generation, knowledge assessment, retrieval-augmented generation, model evaluation |
| Language |
eng |
| Year |
2026 |
| Date and time of uploading |
06.01.2026 23:49:42 |
