Graduate papers
  
Description of the graduate paper
Form of studies Bachelor
Title of the study programm Computer Systems
Title in original language Multimodālos datos balstītu emociju prognozēšanas pieeju izpēte
Title in English Research on Emotion Prediction Approaches Based on Multimodal Data
Department Faculty Of Computer Science Information Tehnology And Energy
Scientific advisor Sintija Petroviča-Kļaviņa
Reviewer Ksenija Lāce
Abstract Bakalaura darba tips: moderno risinājumu izpēte. Bakalaura darba mērķis ir izpētīt un salīdzināt emociju prognozēšanas pieejas, balstoties uz multimodāliem datiem, un sniegt rekomendācijas pieeju pielietojumam. Mērķa sasniegšanai tika izpētīti emociju izpausmes veidi, kas ietver sejas izteiksmes, ķermeņa valodu un žestus, balss intonācijas un dabiskās valodas galvenos aspektus. Tas sniedz izpratni par modalitātes savstarpējām attiecībām un to papildināšanas iespējām, radot plašāku un dziļāku emociju izpratni. Raksturoti emociju modeļi, veikta multimodālās emociju atpazīšanas tehnoloģijas izpēte. Sniegta pamata informācija par emociju atpazīšanas sistēmas izveidi, kas ietver multimodālos emociju atpazīšanas sensorus, datu kopas un multimodālo emociju atpazīšanas procesu, tostarp datu apstrādi, iezīmju ieguvi, klasifikāciju un emociju atpazīšanu. Izanalizēti un apkopoti esošie pētījumi par emociju atpazīšanu no multimodāliem datiem. Veikta uz dziļo neironu tīklu balstītu multimodālo emociju atpazīšanas pieeju pārbaude, salīdzinošā analīze un novērtējums. Rezultātā multimodāla emociju atpazīšanas metode, kuras pamatā ir divdimensiju konvolucionālais neironu tīkls un ilgtermiņa īstermiņa atmiņa, sasniedza augstāko kopējo precizitāti, salīdzinot ar metodēm, kuru pamatā ir konvolucionālais neironu tīkls un dziļais neironu tīkls. Pamatojoties uz iegūtajiem rezultātiem, tiek sniegti ieteikumi metožu pielietošanai. Bakalaura darbs sastāv no 75 lapaspusēm, 18 attēliem, 12 tabulām un 84 izmantotiem informācijas avotiem.
Keywords multimodālā emociju atpazīšana, dziļās mācīšanās metodes, neironu tīkli, emociju modeļi
Keywords in English multimodal emotion recognition, deep learning methods, neural networks, emotion models
Language lv
Year 2024
Date and time of uploading 28.05.2024 21:55:02