Student Računarskog fakulteta Bogdan Tomić je u petak, 19. septembra 2025. godine odbranio diplomski rad na temu AI sistem za automatizovanu procenu znanja: razvoj i implementacija plugina za Moodle pred komisijom koju su činili mentor dr Petar Bojović i član dr Dušan Vujošević.
U apstraktu svog rada Bogdan je istakao:
Ocenjivanje esejskih pitanja na platformama za e-učenje, kao što je Moodle, predstavlja značajan izazov za profesore zbog vremenske zahtevnosti i potencijalne subjektivnosti. Ovaj rad se bavi rešavanjem tog problema kroz dizajn i implementaciju Moodle plugina za automatsku analizu i predlog ocene studentskih esejskih odgovora. Ključne komponente ovog rešenja čine moodle plugin za prosledjivanje informacija i eksterni AI servis koji primenjuje Retrieval-Augmented Generation (RAG) arhitekturu. Plugin omogućava da, na osnovu postavljenog pitanja i studentskog odgovora, backend servis pronalazi relevantne referentne materijale iz specifične baze znanja kreirane za tu svrhu. Prilikom evaluacije, sistem pomoću algoritama za pretragu pronalazi najrelevantniji kontekst iz te baze i prosleđuje ga velikom jezičkom modelu (LLM) zajedno sa odgovorom studenta. Ovakav pristup osigurava da je ocena utemeljena isključivo na gradivu predviđenom za učenje i daje modelu neophodan kontekst, što značajno smanjuje mogućnost ,,halucinacija’’. Rezultat je funkcionalni sistem koji profesorima pruža objektivan uvid u tačnost odgovora, generiše konstruktivnu povratnu informaciju i predlaže ocenu, čime se značajno olakšava i ubrzava proces evaluacije.
…
Međutim, ključna prednost implementiranog pristupa je što se ova potencijalna varijabilnost čini transparentnom. Umesto da AI vrati samo jednu, neobjašnjenu ocenu, sistem pruža detaljan ,,Chain of Thought’ prikazuje generisanu ček-listu i obrazloženje za svaku dodeljenu ocenu. Time se profesoru daje potpun uvid u logiku sistema, omogućavajući mu da lako razume i, ako je potrebno, koriguje finalnu procenu. Suština nije u postizanju apsolutne, mašinske identičnosti u svakom prolazu, već u kreiranju jednostavnog i razumljivog lanca rezonovanja koji proces ocenjivanja čini proverljivim i pedagoški korisnim. – zaključio je Bogdan.