| Form of studies |
Bachelor |
| Title of the study programm |
Computer Systems |
| Title in original language |
Q-Learning apmācības algoritms līnijsekotājā |
| Title in English |
Q-Learning Algorithm in Line Follower |
| Department |
12300 Institute of Applied Computer Systems |
| Scientific advisor |
J.Grundspeņķis, STP kat. profesors |
| Reviewer |
|
| Abstract |
Darbā ir aplūkotie un izanalizēti stimulētie algoritmi. Īpaša uzmanība tiek pievērsta Q-apmācībai. Pētījuma ietvaros bija izveidots līnijsekotājs, kurš tika ieprogrammēts ar Q-apmācību. Pētījumā tika pārbaudīta līnijsekotāja spēja apmācīties ar dažādām apbalvojuma funkcijām, dažādos apstākļos. Ka arī tika pārbaudīta algoritma modificētais variants. Darbs sastāv no ievada, divām nodaļām un 6 pielikumiem.
Pirmajā nodaļā ir ļoti īsi aplūkoti vispārējā līmenī visi apmācības algoritmi, un tālāk sīkāk izskatīti stimulācijas apmācība ar uzsvaru un TD(0), Q-apmācību un SARSA algoritmiem. Tiek izskatīti Markova Lēmumu Pieņemšanas Procesi un atsevišķi izskatīts Q-apmācība
Otrajā nodaļā ir praktiska darba apraksts un secinājumi. Apraksta ietilpst: Q-apmācības algoritma prototips (kurš ir izveidot datorā), līnijsekotākatāja izveidošana un modificēšana, citu līdzīgu darbu apskats, eksperimentu apraksts un secinājumu izvedums. Nodaļas beigās, es rakstu par savas domās par to kas varētu mūs gaidīt nākotnē.
Darba pamattekstā ir 52 lappuses, 16 attēli, 34 tabulas, 15 nosaukumu informācijas avoti un 6 pielikumi. |
| Keywords |
Mašīnapmācība, stimulētie algoritmi, Markova Lēmumu Pieņemšanas Process, TD(0), Q-apmācība, SARSA, l |
| Keywords in English |
Machine learning, reinforcement learning, Markov decision process, TD(0), SARSA, Q-Learning, line fo |
| Language |
lv |
| Year |
2013 |
| Date and time of uploading |
03.06.2013 14:01:40 |
