CaliBrainVR: een kalibratietool voor het gebruik van biosensoren bij virtual reality training & simulaties
De elektronicamarkt kent een groei in betaalbare, betrouwbare en makkelijk te gebruiken biosensoren en wearables zoals EEG headsets (hersenactiviteit) en polsbandjes (hartslag en huidgeleiding). Decennialang onderzoek heeft aangetoond dat deze veelbelovend zijn. Onder meer om cognitieve en psychologische processen als vermoeidheid, stress en mentale belasting te meten.
Zeker vanuit de training- en opleidingssector en binnen bedrijven waar opleiding snel, veiliger en efficiënter moet, is er veel interesse in. De accuraatheid en betrouwbaarheid van de interpretatie van de psychofysiologische signalen voor een bepaald individu is echter vaak nog ondermaats. Dit heeft te maken met interindividuele verschillen die niet in rekening worden gebracht, omdat er geen individuele ijking of kalibratie plaatsvindt voor de training/simulatie begint.
Via dit ConnecTT-project willen we een tool bouwen die toelaat om biosensoren correct en betrouwbaar te integreren in VR/AR/MR trainingsapplicaties. Concreet zal de oplossing de vorm aannemen van een SDK (software development kit), die door ontwikkelaars geïntegreerd kan worden in hun trainingsapplicatie. Deze SDK zal toelaten om individuele profielen te generen vanuit de trainingsapplicatie door het oproepen van een kalibratieprotocol.
Deze profielen bestaan uit metrieken (markers) die indicatief zijn voor cognitieve toestanden (zoals vermoeidheid, stressreacties of hoge cognitieve belasting), en worden gekoppeld aan statistieken die de individuele variabiliteit van deze markers beschrijven. Elk profiel kan opgeslagen worden voor toekomstig gebruik, zodat de kalibratie niet nodeloos herhaald moet worden. Bovendien kan de trainingsapplicatie, via de SDK, profiel informatie opvragen en benutten tijdens de training.
Zeker vanuit de training- en opleidingssector en binnen bedrijven waar opleiding snel, veiliger en efficiënter moet, is er veel interesse in. De accuraatheid en betrouwbaarheid van de interpretatie van de psychofysiologische signalen voor een bepaald individu is echter vaak nog ondermaats. Dit heeft te maken met interindividuele verschillen die niet in rekening worden gebracht, omdat er geen individuele ijking of kalibratie plaatsvindt voor de training/simulatie begint.
Via dit ConnecTT-project willen we een tool bouwen die toelaat om biosensoren correct en betrouwbaar te integreren in VR/AR/MR trainingsapplicaties. Concreet zal de oplossing de vorm aannemen van een SDK (software development kit), die door ontwikkelaars geïntegreerd kan worden in hun trainingsapplicatie. Deze SDK zal toelaten om individuele profielen te generen vanuit de trainingsapplicatie door het oproepen van een kalibratieprotocol.
Deze profielen bestaan uit metrieken (markers) die indicatief zijn voor cognitieve toestanden (zoals vermoeidheid, stressreacties of hoge cognitieve belasting), en worden gekoppeld aan statistieken die de individuele variabiliteit van deze markers beschrijven. Elk profiel kan opgeslagen worden voor toekomstig gebruik, zodat de kalibratie niet nodeloos herhaald moet worden. Bovendien kan de trainingsapplicatie, via de SDK, profiel informatie opvragen en benutten tijdens de training.
Resultaten
Na decennia van ontwikkeling is de technologie zowel op hardware- als softwarevlak eindelijk betaalbaar, performant en gebruiksvriendelijk genoeg om buiten onderzoekslaboratoria en op de werkvloer te gaan gebruiken.
Er is een grote interesse in onze oplossing vanuit de snel groeiende sector van immersieve training applicaties en opleidingen.
Er is een grote interesse in onze oplossing vanuit de snel groeiende sector van immersieve training applicaties en opleidingen.
Promotor
Jelle Demanet
Onderzoeker
Jordy Devoldere,Sam Van de Walle
Howest
01/10/2020 - 31/12/2022
Centrale contactpersoon
