Le but de ce projet est de résoudre de façon pragmatique le problème de l'occlusion en réalité augmentée. Ce problème apparaît lorsqu'un objet réel passe devant un objet virtuel de la scène. Actuellement la plupart des applications de réalité augmentée ignorent simplement ce cas, ou s'arrangent pour l'éviter, mais sa résolution ouvrirait de nombreuses nouvelles applications à la réalité augmentée.
Le cas d'étude de ce projet est de pouvoir montrer à un patient l'effet d'une prothèse dentaire avant de se lancer dans une réalisation couteuse. En particulier ce projet de semestre se focalisera sur les aspects clés liés à le tracking de la tête (position 3D et orientation) et des la segmentation des lèvres à l'aide d'une camera RGB et d'une caméra de profondeur (Microsoft Kinect, par exemple).