Graduate papers
  
Description of the graduate paper
Form of studies Master
Title of the study programm Intelligent robotic systems
Title in original language Lokālo lielo valodas modeļu lietojums robotizētās sistēmās
Title in English Local Large Language Model Usage in Robotic Systems
Department Faculty Of Computer Science Information Tehnology And Energy
Scientific advisor Modris Greitāns
Reviewer Gints Jēkabsons
Abstract Dabiskā valoda ir ērts veids kā cilvēkam sazināties vienam ar otru. Ikdienas rutīnā ieviešot robotiskās sistēmas, to spēja saprast šo valodu atvieglotu gan sistēmas integrēšanas procesu, gan savstarpējo sadarbības efektivitāti starp cilvēku un robotu. Dabiskās valodas apstrāde pēdējos gados tiek balstīta uz transformeru arhitektūru, kas ļāvusi sasniegt augstas kvalitātes rezultātus. Plašu popularitāti ir guvuši lielie valodas modeļi(LLM), kam piemīt spēja ģenerēt kvalitatīvu un šķietami sakarīgu tekstu. No apskatītās literatūras var secināt, ka LLM pielietojums robotikas uzdevumu risināšanā tiek attīstīts vairākos virzienos, bet uzsvars šajos pētījumos pārsvarā tiek likts uz slēgtu modeļu izmantošanu - tie ir paši kvalitatīvākie modeļi, bet piekļuve tiem ir tikai attālināti un ar nosacītiem ierobežojumiem. Šāda pieeja traucē izveidot patiesi autonomos robotus, jo tie ir atkarīgi no stabila savienojum ar internetu, lai veiktu savas pamatfunkcijas. Šī darba ietvaros tiek apskatīts lokālu, konkrēti kompaktu, LLM pielietojums robotikas sistēmas dabisku valodu komandu uztverē un augsta līmeņa plānošanā. Lokāli LLM ir ar publiski pieejamām svaru vērtībām, kas ļauj tos iegūt lietošanai uz lietotāja datoraparatūras. Ar kompaktiem LLM tiek saprasti modeļi, kurus iespējams realizēt uz vienas grafiskās kartes, kas pieejama plaša patēriņa tirgū. Tiek izstrādāta robotu dabiskas valodas uztveres un augsta līmeņa plānošanas sistēma, kas veic trīs funkcijas: ienākošu pieprasījumu kategorizēšana, pieprasījuma priekšapstrāde un darbību plānošana. Tiek pārbaudīta vairāku LLM spēja veikt šos uzdevumus atsevišķi un kopā kā pilna darbību ķēde. Ir parādīts piemērs, kur, kā valodas apstrādes apakšmodulis,tā ir praktiski implementēta robotu vadības sistēmā. Balstoties uz iegūtajiem rezultātiem tiek secināts, ka LLM ar vismaz 7B parametru skaitu var potenciāli uzticēt veikt augsta līmeņa robotisku sistēmu vadību, liekot uzsvaru uz to valodas apstrādes spējām.
Keywords DABISKĀS VALODAS APSTRĀDE, LIELIE VALODU MODEĻU, DARBĪBU PLĀNOŠANA, ROBOTIKA
Keywords in English NATURAL LANGUAGE PROCESSING, LARGE LANGUAGE MODELS, TASK PLANNING, ROBOTICS
Language lv
Year 2024
Date and time of uploading 28.05.2024 17:37:58