| Abstract |
Lielie valodu modeļi (LVM) arvien biežāk tiek izmantoti jautājumu ģenerēšanai mācību un zināšanu vērtēšanas vajadzībām, taču ģenerēto rezultātu kvalitāte joprojām ir nevienmērīga. Radītie jautājumi var būt neskaidri, uz tiem var nebūt iespējams atbildēt, izmantojot avota materiālu, vai arī tie var neatspoguļot paredzēto kognitīvo slodzi. Blūma taksonomija tiek plaši izmantota, lai noteiktu jautājumu kognitīvo līmeni, taču līdzšinējos pētījumos vaicājumu izstrāde, Blūma līmeņa noteikšana un modeļa izvēle parasti tiek skatīti kā atsevišķi aspekti, nevis kā daļa no vienota un atkārtojama procesa. Turklāt bieži vien Blūma līmeņi tiek iekļauti pašos vaicājumos, taču to reālā atbilstība ģenerētajā rezultātā netiek pārbaudīta.
Šī darba mērķis ir izstrādāt, demonstrēt un novērtēt ietvaru Pārskatītajai Blūma taksonomijai atbilstošu jautājumu ģenerēšanai, izmantojot lielos valodas modeļus. Pētījums izstrādāts, balstoties uz dizaina zinātnes pētniecības metodoloģiju, ko papildina sistemātisks literatūras apskats, kas veikts atbilstoši PRISMA 2020 vadlīnijām. Analizētajā literatūrā tika atklāti trūkumi līdzšinējās pieejās, uz kuru pamata tika definētas sešas dizaina prasības izstrādājamajam artefaktam. Rezultātā radītais ietvars sastāv no trim savstarpēji saistītiem slāņiem: procesuālā slāņa, kas apraksta sešu soļu ģenerēšanas procesu; veidņu slāņa, kas piedāvā trīs vaicājumu sagataves; un vērtēšanas slāņa, kas nodrošina rubriku katra ģenerētā jautājuma novērtēšanai pēc tā pamatotības avotā, skaidrības un atbilstības Blūma taksonomijai. Ietvara darbība demonstrēta, izmantojot vienu avottekstu, lai ģenerētu un individuāli novērtētu jautājumus vairākos Blūma taksonomijas līmeņos ar divu dažādu valodas modeļu palīdzību.
Darbs satur 72 lappuses, 4 attēlus, 18 tabulas, 30 references un 3 pielikumus. |
