Changer de langue

Réalité mixte collaborative : expérimentation d'un nouveau format pédagogique immersif

Formateur et apprenants réunis dans la même salle

Casques VR, téléphones et tablettes sur un repère 3D commun

Un seul projet Unity, fonctionnement 100 % local

Client :

CCCA-BTP

Partenaires :

Financement sur 3 ans : Deffinum – AMI CMA CCCA BTP

#realitemixte #realitevirtuelle #realiteaugmentee #unity #openxr #xrinteractiontoolkit #netcode #bim #formation

Description

Plusieurs participants – formateur(s) et apprenant(s) – sont présents dans une même pièce. Celle-ci comporte en son centre un repère commun à tous, qui permet d'avoir une superposition 3D « commune ». Certaines personnes peuvent utiliser un casque de réalité virtuelle, d'autres un téléphone ou une tablette.

Chacun voit la salle en vidéo, mais le contenu 3D s'ajoute au réel : c'est un format de réalité mixte. Le degré d'immersion change entre l'usage d'un casque et celui d'un téléphone, tout comme la tolérance physiologique de la personne à l'outil. L'établissement ou le formateur a donc le choix de déployer les appareils qu'il préfère, le développement logiciel restant le même (un seul projet Unity, plusieurs déploiements possibles).

Tous les participants sont « connectés » entre eux via un système de réseau local transparent, sans réglage nécessaire.

Le formateur dispose de contrôles sur son module (interrupteurs pour afficher ou cacher des parties 3D, changement d'échelle…) pour agir en direct sur le scénario pédagogique. C'est lui qui est au centre du module : il peut parler, se déplacer et faire des gestes dans l'environnement, car sa silhouette et celle des autres sont affichées sous forme de vidéo.

Les participants se voient donc entre eux, mais dans un environnement 3D. Le formateur peut par exemple utiliser des outils physiques dans un environnement virtuel ou inversement, ou simplement se déplacer dans une maquette BIM pour pointer des éléments du doigt comme si l'on était réellement sur chantier. Ce format peut être combiné à des scans 3D (photogrammétrie, nuages de points laser…) pour un haut niveau de réalisme.

Avantages et nouveauté du format :

  • Pas d'environnement 3D (décor) à intégrer en réalité mixte : on se concentre sur le propos pédagogique dans la salle de formation.
  • Interactivité limitée : le formateur a la main sur un scénario simple mais efficace.
  • Module immersif moins périssable, car sans voix off, texte ni interface qui pourraient changer avec le temps, les lois ou les pratiques professionnelles : le formateur est acteur du contenu de son module.
  • Développement agnostique (interopérable) en termes d'équipement : il peut évoluer facilement au fil des années grâce aux normes et frameworks gratuits OpenXR, XR Interaction Toolkit et Netcode for GameObjects.
  • Aucune ressource tierce à Unity, qui serait payante ou risquée. Fonctionnement intégralement local, respectueux du RGPD grâce au principe de protection de la vie privée dès la conception.

Vérification rapide

Pour protéger notre adresse des robots, répondez à cette question :