Labelians experience part.2

Après une première étape sous la forme d'une visite virtuelle 360° 3D, place à une nouvelle expérimentation immersive pour notre client Labelians : la conception d'une application mobile d'affichage d'objets 3D en réalité augmentée...
 

équipements et mobilier en réalité augmentée

VirtualMedia a donc élaboré pour son client, une application mobile, fonctionnant sur smartphone, iphone ou tablette, qui contrôle principalement la fonction caméra de l'appareil.

• L'utilisateur sélectionne dans l'interface un des objets 3D proposés par Labelians (équipement ou mobilier)
  
  
• La caméra s'active et scanne l'environnement de l'utilisateur
   
• L'application reconnaît l'environnement et utilise des algorithmes de suivi pour comprendre l'emplacement et l'orientation de la surface où l'objet 3D sera placé
   
• Une fois l'emplacement identifié, l'application superpose l'objet 3D virtuel dans le champ de vision de la caméra, aligné avec le monde réel visible à l'écran du smartphone
   
• L'utilisateur peut alors interagir avec l'objet 3D en le faisant pivoter, en l'agrandissant ou en le réduisant et voir ainsi à quoi ressemblerait le produit dans un environnement réel.
   

Un p'tit truc en plus : la reconnaissance d'images

Juste pour le fun, on a déployé une autre fonctionnalité intéressante, toujours sur le principe de contrôle de la caméra : la reconnaissance d'images.

Ainsi l'utilsateur, plutôt que de cliquer "simplement" dans l'interface de l'application, utilise l'appareil photo de son smartphone pour capturer une image sur la plaquette commerciale de notre client.

C'est le même principe que le QR code. Cette fonctionnalité s'appuie sur la technologie du template matching : cette technique permet de détecter les parties d’une image qui correspondent à une image de référence. La caméra est alors en capacité de reconnaître une similarité avec des images préalablement identifiées dans la base de données.

Selon l'image ainsi capturée, l'application identifie l'objet 3D correspondant et le projette alors en réalité augmentée comme précédemment.

En bref, un beau projet, plein de challenges, qui a permis à Virtualmedia de combiner ses talents et compétences afin de démarquer son client de la concurrence en présentant ses produits via des expériences innovantes et ludiques plutôt que par un simple et banal catalogue.

Ce n'est pas évident d'illustrer le phénomène sous forme d'une simple image, mais on peut le montrer grâce à une vidéo réalisée par le client lui-même...

l'application mobile dans le détail
 

• Élaboration de la fonctionnalité d'affichage en réalité augmentée
• Intégration des objets 3D
• Élaboration de la fonctionnalité de reconnaissance d'images
• Implémentation et identification des images de référence
• Développement de l'application aux standards mobile
• Publication sous Google Play
• Publication sous Apple store