ATHENA projekto įgyvendinimas ir planuojamos įrangos panaudojimas. Europos Sąjungos „Horizon Europe, RIA“ programos projektas ATHENA skirtas žmogaus ir robotų bendradarbiavimo tyrimams, siekiant efektyviau šalinti nelaimingų įvykių pasekmes. Projekto esmė – kurti technologijas, kurios padėtų gelbėtojams, pavyzdžiui, ugniagesiams, dirbti saugiau ir tiksliau, naudojant autonominius bei pusiau autonominius robotus. KTU šiame projekte yra atsakingas už virtualiosios (VR) ir papildytosios realybės (AR) sprendimų kūrimą antrajame veiklų pakete (WP2), skirtą robotų elgsenos modeliavimui, žmogaus ir roboto sąveikos tyrimams bei mokymo priemonių krimui. Pirmuosiuose projekto etapuose KTU kuria realistines nelaimių simuliacijas bei „skaitmeninius dvynius“, atkuriančius tikroviškas aplinkas, kuriose vykdomos gelbėtojų treniruotės. Šiam tikslui bus naudojamas 3D lazerinis skeneris Artec Ray II, leidžiantis itin tiksliai fiksuoti aplinką, statinius ir objektus. Surinkti duomenys bus naudojami 3D modeliams kurti ir integruoti į simuliacijas, kuriose bus vertinamas žmogaus ir roboto elgsenos efektyvumas, jų sąveikos kokybė. Ši veikla bus vykdoma bendradarbiaujant su Agedrio universitetu, atsakingu už robotų prototipų kūrimą ir jų elgsenos modeliavimą. Kuriant žmogaus ir roboto sąveikos simuliacijas, bus naudojama VR judesių fiksavimo sistema SmartSuite Pro II, leidžianti realiu laiku registruoti žmogaus kūno judesius ir gestus. Tai leis kurti realistiškas VR aplinkas atkuriant tikroviškus judesius (animacijas). Papildomai integruojama haptinės sąveikos įranga Haptics Falcon 4 Bundle, kuri suteikia jutiklinį grįžtamąjį ryšį, leisdama ne tik vizualiai, bet ir fiziškai jausti sąveiką su virtualiais objektais. Kartu bus naudojama ir kita (turima) haptinė įranga, leisianti sukurti įtraukią žmogaus–roboto sąsają, paremtą lietimo pojūčiais. Papildytosios ir mišriosios realybės tyrimams bus naudojamos AR įrenginių sistemos Apple Vision Pro ir Magic Leap, suteikiančios galimybę realioje erdvėje vizualizuoti virtualius elementus ir modeliuoti gelbėjimo situacijas. Jos bus taikomos hibridiniuose mokymų scenarijuose, kuriuose žmonės galės treniruotis valdyti robotus. Dirbtinio intelekto sprendimai bus naudojami įrašų analizei, siekiant optimizuoti žmogaus-roboto sąveiką. Šie įrenginiai taip pat leis tirti, kaip papildyta realybė gali pagerinti informacijos suvokimą, sprendimų priėmimą ir veiksmų koordinaciją sudėtingose sąlygose. VR kamera KANDAO Obsidian PRO (12K 3D VR Cinematic Camera) suteiks galimybę kurti itin aukštos raiškos 360° vaizdo turinį, reikalingą mokymų scenarijams ir ekstremalių aplinkų vizualizacijai. Ji leis mokslininkams įrašyti, analizuoti ir formuoti mokymosi turinį, pritaikytą gelbėtojų komandų treniruotėms. Kartu, 360 video galės būti panaudoti analizei ir situacijų atkūrimui. Projektui reikalingus skaičiavimus užtikrins aukšto našumo skaičiavimo serveris PowerEdge R770 su 2× NVIDIA H200 GPU, skirtas didelio masto duomenų analizei, dirbtinio intelekto modelių apmokymui ir įrašytų VR/AR simuliacijų sesijų analizei. Serveris leis analizuoti robotų įrašytus video, įgalins sukurti dirbtinio intelekto modelius, skirtus roboto navigacijos tobulinimui ir svarbių objektų (nelaimės vietoje ieškomų žmonių) automatizuotam aptikimui. Tam šiame projekte bus naudojami humanoidiniai robotai Unitree G1 EDU Ultimate (U4) ir Unitree GO2 EDU U2. Šie robotai padės kurti ir testuoti dirbtinio intelekto pagrindu veikiančius autonominio judėjimo ir objektų paieškos algoritmus, pritaikomus gelbėjimo operacijoms. Tai sustiprins KTU dirbtinio intelekto infrastruktūrą ir padidins projekto tyrimų mastą. Socialinės ir emocinės būsenos tyrimams bus naudojami Buddy ir TEMI robotai. Buddy robotas skirtas analizuoti bendravimą, socialinę ir emocinę įtrauktį, todėl bus taikomas kuriant mokymų scenarijus, imituojančius streso ir rizikos situacijas. TEMI robotas, turintis automatinio kritimų aptikimo sistemą, bus naudojamas sveikatos technologijų, senjorų priežiūros ir avarijų prevencijos tyrimuose. Abu robotai padės plėtoti tyrimus, susijusius su saugumo ir socialinės paramos sistemomis. Visa įranga bus įdiegta KTU Virtualiosios ir papildytosios realybės technologijų laboratorijoje (VRLab) (https://if.ktu.edu/vrlab/), kuri specializuojasi įtraukiosios realybės tyrimuose – nuo žaidimais grįsto mokymosi iki pažangių papildytosios realybės sprendimų realioms problemoms. Nauja įranga sustiprins laboratorijos infrastruktūrą T007 Informatikos inžinerijos ir N009 Informatikos mokslo kryptyse, skatins tarpdisciplininius tyrimus žmogaus–kompiuterio sąveikos, VR/AR, inžinerijos, sveikatos ir edukacijos srityse. Ji bus prieinama ir išorės tyrėjams per atviros prieigos sistemą APCIS, taip užtikrinant jos panaudojimą plačiau akademinėje bendruomenėje. KTU pagrindinis indėlis projekte – 2.3 darbo paketas, kuriame universitetas yra lyderis. Šio paketo tikslas – sukurti įtraukią ir laipsnišką mokymo programą gelbėtojų komandoms, skirtą išmokyti efektyvaus autonominių robotizuotų priemonių naudojimo. Darbo paketas apima virtualių mokymo programų kūrimą, haptinių sąsajų integravimą, interaktyvių modulių diegimą bei jų efektyvumo vertinimą realiuose scenarijuose. Su ATHENA projektu glaudžiai susijusios KTU doktorantūros temos „Virtualiosios realybės ir taktilinių technologijų panaudojimo mokymų tyrimas“ ir “Generatyvinių dirbtinio intelekto algoritmų taikymo erdvinių 3D modelių medžiagiškumo automatiniam generavimui tyrimas”. Abi tematikos susijusios su haptinių ir VR priemonių taikymu. Antroji tematika susijusi su žmogaus–roboto sąveikos tyrimais šiais metais gavo finansavimą ir vykdoma KTU (vadovas Filippo Sanfilippo). Į projekto įgyvendinimą bus įtrauktos bent trys KTU Informatikos fakulteto mokslo grupės: 1. Multimodalinės žmogaus ir kompiuterio sąsajos – tirianti išmaniąsias sąveikos technologijas, signalų analizę ir AI pritaikymus; 2. Išmaniosios edukacinės technologijos – analizuojanti dirbtinio intelekto taikymą mokymosi procese; 3. Dirbtinio intelekto ir vaizdų apdorojimo metodų taikymas multimedijoje – kurianti algoritmus VR/AR ir robotikos sąveikai optimizuoti. Pasibaigus ATHENA projektui planuojama remiantis šia infrastruktūra teikti naujas tarptautines projektų paraiškas, siekiant tęsti mokslinius tyrimus žmogaus–kompiuterio sąveikos, dirbtinio intelekto, įtraukiųjų edukacinių technologijų ir robotikos srityse, panaudojant sukauptą patirtį bei įsigytą modernią įrangą.