L’objectif est de répertorier plusieurs méthodes de “tracking” existantes qui peuvent être utilisées sur un casque de réalité augmentée Hololens, en particulier celles basées sur des mires, puis d’en tester certaines pour déterminer la plus intéressante en fonction du contexte de nos applications.

La possibilité de visualiser des objets virtuels en 3D immergés dans notre monde réel via des casques de Réalité Augmentée (RA), permet aujourd’hui le développement de nombreuses applications aussi bien pour les loisirs que pour la recherche, l’industrie ou encore l’enseignement. De nombreuses applications en RA sont basées sur le principe du tracking : par exemple, un objet virtuel peut être « épinglé » à un objet particulier du monde réel, et si ce dernier se déplace, l’objet virtuel se déplacera également. Dans un souci de réalisme et de confort visuel pour l’utilisateur, ceci doit se faire en temps réel, et de la manière la plus fluide possible. Afin de faciliter le travail, une ou plusieurs mires peuvent être positionnées sur l’objet du monde réel où l’on souhaite ajouter l’objet virtuel, et ce sont alors ces mires qui doivent être détectées en temps réel par la caméra du casque pour permettre le tracking.

Le but de ce PFE est de répertorier plusieurs méthodes de tracking existantes qui peuvent être utilisées sur un Hololens, en particulier celles basées sur des mires, puis d’en tester certaines pour déterminer la plus intéressante en fonction du contexte de l’application.

Encadrant principal : Frédéric Payan, Enseignant chercheur au laboratoire CNRS I3S, situé à 300 mètres du site Polytech Autre encadrant : Marc Antonini, chercheur CNRS à l’I3S.

Compétences Requises

traitement d’images et vidéos, connaissances en Réalité augmentée seraient un plus.

Besoins Clients

Nous souhaitons développer des applications de RA pour l’hololens qui nécessitent d’ajouter des objets 3D virtuels (sous forme de maillages par exemple) sur des objets bien particuliers du monde réel. A l’instant t, nous devons trouver dans la littérature des méthodes de tracking qui exploitent la vidéo capturée par le casque hololens pour détecter des mires bien particulières, qui nous permettrons ensuite d’y accrocher l’objet virtuel de notre choix. Nous attendons donc des étudiants une recherche Internet pour selectionner des fonctions de tracking adaptées à nos besoins, et ensuite les tester sur notre casque hololens.

Résultats Attendus

un rapport sur les différentes méthodes de tracking adaptées à nos besoins, notamment celles disponibles sur internet, puis des expérimentations sur notre casque hololens pour estimer les performances de chacune.

Références

Informations Administratives

  • Contact : Frédéric Payan fpayan@i3s.unice.fr
  • Identifiant sujet : Y1819-S009
  • Effectif : entre 2 et 3 étudiant(e)s
  • Parcours Recommandés : SD,WEB
  • Équipe: SIS / Mediacoding