Odbrana master rada: Generisanje i evaluacija ispitnih pitanja pomoću LLM modela i HPC infrastrukture

Dana 21. oktobra 2026. godine, kandidatkinja Sara Kovačević uspješno je odbranila master rad pod nazivom „Generisanje i evaluacija kvaliteta ispitnih pitanja pomoću velikih jezičkih modela i HPC infrastrukture“ na Fakultetu za informacione sisteme i tehnologije Univerziteta Donja Gorica (UDG), u okviru master programa Vještačka inteligencija. Mentor rada bio je prof. dr Tomo Popović. Istraživanje je dijelom realizovano uz podršku NCC Montenegro u okviru projekta EuroCC3, uključujući korišćenje HPC infrastrukture i podršku eksperimentalnom radu. Rad demonstrira mogućnosti kombinovanja generativne vještačke inteligencije i računarstva visokih performansi za pripremu i evaluaciju obrazovnih materijala, sa posebnim osvrtom na crnogorski jezik.

Sara Kovacevic tokom odbrane njene Master teye

APSTRAKT – U okviru master rada razvijen je i evaluiran automatizovani sistem za generisanje ispitnih pitanja iz video predavanja primjenom velikih jezičkih modela (LLM). Sistem obuhvata automatsku transkripciju predavanja, izdvajanje ključnih pojmova, generisanje pitanja višestrukog izbora i kratkih odgovora, kao i automatizovanu evaluaciju njihovog kvaliteta. Istraživanje je obuhvatilo devet konfiguracija LLM modela na engleskom i crnogorskom jeziku, uz korišćenje lokalnih računarskih resursa, HPC klastera UDG-a i API servisa za inferenciju.

Evaluacija je kombinovala jezičke i strukturne metrike, Bloomovu taksonomiju i LLM-as-Judge pristup za procjenu kvaliteta generisanih pitanja. Rezultati su ukazali na izazove primjene manjih jezičkih modela pri generisanju obrazovnog sadržaja na crnogorskom jeziku, dok su veći modeli ostvarili konzistentnije rezultate. Eksperimenti na HPC klasteru UDG-a pokazali su ubrzanje GPU inferencije od 17,9 puta u odnosu na CPU za isti model.

Istraživanje ukazuje na potencijal primjene AI i HPC tehnologija kao podrške nastavnicima u pripremi materijala za provjeru znanja, uz naglašenu potrebu za nastavničkom kontrolom kvaliteta i dodatnom pedagoškom validacijom prije praktične primjene.

Odbrana master rada: Objašnjiva vještačka inteligencija u procjeni rizika od dijabetesa tipa 2

Dana 21. oktobra 2026. godine, kandidatkinja Sanja Lazić uspješno je odbranila master rad pod naslovom „Interpretabilni modeli mašinskog i dubokog učenja za predikciju rizika od dijabetesa tipa 2 na osnovu bihejvioralnih i kliničkih indikatora“, na master studijskom programu Vještačka inteligencija Fakulteta za informacione sisteme i tehnologije Univerziteta Donja Gorica, pod mentorstvom prof. dr Toma Popovića.

Istraživački i eksperimentalni dio rada djelimično je realizovan uz podršku Nacionalnog centra kompetencija za visokoperformansno računarstvo Crne Gore (NCC Montenegro), kroz HPC infrastrukturu i ekspertizu u okviru projekta EuroCC3, uz dodatnu istraživačku podršku projekta AI-AGE. Kroz podršku akademskim istraživanjima, mentorstvu i razvoju kompetencija, NCC Montenegro doprinosi jačanju primjene naprednih AI i HPC tehnologija u zdravstvu i drugim naučnim oblastima.

Sanja Lazić tokom odbrane master rada

Master rad istražuje primjenu mašinskog i dubokog učenja, kao i metoda objašnjive vještačke inteligencije, u procjeni rizika od dijabetesa tipa 2, sa posebnim osvrtom na prediktivne performanse, pouzdanost i interpretabilnost modela. Istraživanje takođe demonstrira mogućnosti primjene AI modela u preventivnoj zdravstvenoj zaštiti, kroz procjenu rizika zasnovanu na podacima prikupljenim putem upitnika, bez potrebe za laboratorijskim analizama.

APSTRAKT – U radu je predstavljen razvoj i sistematska evaluacija modela mašinskog i dubokog učenja za procjenu rizika od dijabetesa tipa 2 na osnovu bihejvioralnih, kliničkih i demografskih indikatora. Istraživanje je obuhvatilo 253.680 zapisa i poređenje pet modela: logističke regresije, Random Forest, XGBoost, LightGBM i duboke neuronske mreže. Performanse su analizirane kroz diskriminativnost, kalibraciju procijenjenih vjerovatnoća i interpretabilnost. Duboka neuronska mreža ostvarila je najveću ROC-AUC vrijednost (0,7728), dok je LightGBM pokazao najuravnoteženije ukupne performanse. Za objašnjenje predikcija primijenjene su metode TreeSHAP, integrisani gradijenti i DeepLIFT SHAP. Razvijen je i prototip web aplikacije koji demonstrira prikaz procijenjenog rizika i faktora koji su doprinijeli pojedinačnim predikcijama.

Rezultati ukazuju na potencijal objašnjive vještačke inteligencije za podršku neinvazivnoj procjeni rizika i preventivnom skriningu, uz naglašavanje značaja pouzdanosti i transparentnosti modela, kao i potrebe za dodatnom validacijom prije njihove kliničke primjene.

Razvoj podržan EuroHPC resursima unapređuje AI transkripciju predavanja na crnogorskom jeziku

Rezultati razvoja realizovanog u okviru Proof of Concept projekta Exams 4.0, uz podršku Fonda za inovacije Crne Gore i korišćenje EuroHPC računarskih resursa, predstavljeni su na međunarodnoj konferenciji SAMYRAD 2026 u Sevilji, Španija.

Naučno-stručni rad „Whisper-Based Lecture Transcription for Montenegrin Higher Education with a Practical Evaluation“ predstavljen je na međunarodnoj konferenciji Smart Algorithms & Models: Your Reach to Advanced Dialogues (SAMYRAD 2026), održanoj 5–6. oktobra 2026. godine u Sevilji, Španija.

Autori rada, Stevan Čakić, Tomo Popović, Srđan Krčo i Igor Čulafić, istraživali su mogućnosti primjene OpenAI Whisper modela za automatsku transkripciju univerzitetskih predavanja na crnogorskom jeziku, koji nije direktno podržan ovim modelom.

Istraživanje je obuhvatilo evaluaciju tri varijante Whisper modela i tri jezička podešavanja zasnovana na srodnim južnoslovenskim jezicima, korišćenjem 30 univerzitetskih predavanja u ukupnom trajanju od gotovo 38 sati. U okviru eksperimenata generisano je 4.860 transkripata, pri čemu je za obimnu računarsku obradu korišćen EuroHPC superračunar LUMI u Finskoj.

Rezultati su pokazali da je varijanta Whisper turbo najpogodnija među testiranim modelima u pogledu konzistentnosti transkripcije, procijenjenog kvaliteta teksta i brzine obrade. Istraživanje je pružilo i praktične preporuke za obradu snimaka univerzitetskih predavanja na crnogorskom jeziku.

Klikni na sliku za link do konferencije

Autori rada, Stevan Čakić, Tomo Popović, Srđan Krčo i Igor Čulafić, istraživali su mogućnosti primjene OpenAI Whisper modela za automatsku transkripciju univerzitetskih predavanja na crnogorskom jeziku, koji nije direktno podržan ovim modelom.

Razvoj i eksperimenti su obuhvatili evaluaciju tri varijante Whisper modela i tri jezička podešavanja zasnovana na srodnim južnoslovenskim jezicima, korišćenjem 30 univerzitetskih predavanja u ukupnom trajanju od gotovo 38 sati. U okviru eksperimenata generisano je 4.860 transkripata, pri čemu je za obimnu računarsku obradu korišćen EuroHPC superračunar LUMI u Finskoj.

Rezultati su pokazali da je varijanta Whisper turbo najpogodnija među testiranim modelima u pogledu konzistentnosti transkripcije, procijenjenog kvaliteta teksta i brzine obrade. Istraživanje je pružilo i praktične preporuke za obradu snimaka univerzitetskih predavanja na crnogorskom jeziku.

Dobijeni rezultati već su primijenjeni u razvoju novog modula za transkripciju predavanja u okviru platforme Exams 4.0, koji omogućava nastavnicima da audio i video snimke pretvore u tekst koji se zatim može koristiti za AI-potpomognutu pripremu nastavnih materijala i ispitnih pitanja.

Istraživanje je realizovano u okviru Proof of Concept projekta Exams 4.0, koji sprovodi kompanija DigitalSmart u saradnji sa Univerzitetom Donja Gorica, uz finansijsku podršku Fonda za inovacije Crne Gore.

HPC Montenegro (Nacionalni centar kompetencija za HPC u Crnoj Gori) pružio je podršku istraživačkom timu u obezbjeđivanju pristupa evropskim superračunarskim resursima kroz EuroHPC JU Development Access program (oznaka projekta: EHPC-DEV-2024D12-018). Računarski eksperimenti realizovani su na superračunaru LUMI, kojim upravljaju CSC u Finskoj i LUMI konzorcijum.

Ovo istraživanje predstavlja primjer kako pristup evropskoj HPC infrastrukturi može doprinijeti primijenjenim istraživanjima u oblasti vještačke inteligencije, podsticanju inovacija u visokom obrazovanju i razvoju digitalnih alata prilagođenih manjim i nedovoljno zastupljenim jezicima.