En fonction des différents axes du projet différents matériels seront utilisés~: du système d’acquisition le plus complexe (Axe 1), au plus simple et léger pour le suivi (Axe 3), et un système de remobilisation ludifié en réalité virtuelle/augmentée pour l’axe 2.
Axe 1 : Évaluer
Cette application est basée sur différents tests de mobilité (notamment le TUG) en immersion en réalité virtuelle (ou réalité augmentée) pour stimuler le patient en conditions proches de sa réalité quotidienne.
Notre choix s’est porté sur le casque HTC XR Elite, car il possède un système passthrough permettant de l’utiliser en VR mais aussi en AR. Il possède aussi l’eyetracking grâce à l’ajout d’un module en option. Son API permet de mettre en oeuvre l’interaction naturelle avec les mains (sans utiliser les joysticks).
En complément, les HTC Ultimate trackers ainsi que les Wrist trackers seront utilisés en raison de leur bonne précision pour acquérir les positions du tronc et des membres de l’utilisateur lors de ses activités.
Les signaux physiologiques de la personne seront enregistrés à l’aide d’un système TEA Captiv https://www.teaergo.com/captiv/ utilisant des capteurs sans fil très peu invasifs.
L’ensemble de l’application d’évaluation est développée à l’aide de Unity pour la partie jeu sérieux temps réel et Blender pour la partie modélisation. Les différentes API HTC et TEA sont interfacés en C# avec Unity.
Axe 2 : Stimuler
L’axe 2 prend en charge la remobilisation patient par exergame VR et AR . Cette application de ré-entraînement immersive en réalité virtuelle/augmentée contrôlable par le praticien lui permettra de configurer pour le patient une « ordonnance virtuelle » avec une liste d’exercices à pratiquer depuis l’application.
Concernant l’axe 2, notre partenaire Mist Studio https://www.miststudio.fr/ a opté pour le casque de VR/AR Meta Quest 3 . Ce casque dernière génération possède de très bonne caractéristiques techniques et est facile d’usage.
Axe 3 : Suivre
L’axe 3 traite du suivi longitudinal de la mobilité des utilisateurs. Pour cela notre partenaire Cybernano https://cybernano.eu/fr/accueil/ a réalisé une étude afin de choisir un capteur de type IMU (Inertial Measurment Unit-Centrale inertielle) qui réponde aux exigences utilisateurs mais aussi des exigences techniques telles que, le poids, la capacité de stockage du capteur, l’autonomie de la batterie, le temps de téléchargement des données en Bluetooth sur le smartphone.
