Multi-GPU AI Train the Trainer radionica organizovana je u periodu od 30. januara do 5. februara kao niz cjelodnevnih, intenzivnih predavanja, realizovanih uporedo sa standardnim kursevima iz oblasti vještačke inteligencije i multi-GPU računanja. Ova radionica je dopunila snažan tehnički fokus redovnog kursa posebnim edukativnim programom. Dok je redovni kurs bio usmjeren na praktične vještine izgradnje, skaliranja i optimizacije AI opterećenja na više GPU-ova, Train-the-Trainer program je bio posebno osmišljen da buduće predavače opremi znanjem i pedagoškim alatima neophodnim za efikasno prenošenje ovih tema. Kako samo mali broj HPC i AI centara širom Evrope nudi ovako specijalizovanu edukaciju, ovaj program doprinosi širenju mreže trenera i institucija sposobnih da realizuju visokokvalitetne AI i multi-GPU kurseve na nacionalnom i evropskom nivou. Istraživači iz Nacionalnog centra kompetencija (NCC) Crne Gore učestvovali su na ovom kursu, dodatno jačajući nacionalne kapacitete u oblasti napredne AI i multi-GPU obuke.
Tokom treninga, učesnici su stekli razumijevanje savremenih multi-GPU i distribuiranih AI tehnologija. Pod vođstvom instruktora, polaznici su se upoznali sa najsavremenijim alatima, okvirima i najboljim praksama za skaliranje AI opterećenja, nastavnim materijalima i praktičnim radom prilagođenim realizaciji sopstvenih kurseva. Predavanja su obuhvatila širok spektar tema, uključujući GPU arhitekture i pristup HPC infrastrukturi; osnove dubokog učenja i prelazak sa CPU- na GPU-bazirana opterećenja; distribuirano treniranje u PyTorch-u (Distributed Data Parallel, paralelizacija modela, PyTorch Lightning); velike jezičke modele, tehnike finog podešavanja i okvire kao što su Hugging Face Accelerate i DeepSpeed; kao i računarski vid, MLOps, Ray, Retrieval Augmented Generation (RAG) i podešavanje hiperparametara.
Trening je organizovan od strane NCC Poljska, NCC Holandija, NCC Mađarska, NCC Belgija, NCC Italija, NCC Finska, NCC Švedska, svih Nacionalnih centara kompetencija za visokoperformansno računanje, kao i CASTIEL2 i EuroCC2/EuroCC4SEE.
