Modélisation 3D de séquences vidéo
Participants:
Luce Morin,
Franck Galpin,
Mohammed Rziza,
Phillipe Coval,
Anciens:
Lionel Oisel
For english speaking visitors , look at the 3D Reconstruction and Applications demo pages where you will find some explanations in english on our research topics.
Cet axe de recherche vise à fournir les méthodologies et algorithmes
de modélisation 3D par analyse de séquences vidéo monoculaires (une seule
caméra mobile) pour une navigation fluide dans une scène au travers d'un réseau de télécommunications.
On souhaite obtenir une représentation permettant de restituer la scène qui a été acquise, avec les objectifs suivants:
- bénéficier de la qualité d'images réaliste présente dans la séquence originale (par opposition aux modèles synthétiques),
- disposer d'une information 3D permettant des actions de post-production, stéréoscopie, navigation 3D (par opposition à la vidéo ou aux panoramas),
- permettre une interactivité, même limitée, lors de la navigation dans la scène (par opposition aux vidéos simples),
- être compacte et hiérarchique pour s'adapter à une restitution et navigation à distance à travers un réseau.
- obtenir cette représentation par un processus automatique et robuste, sans a priori sur le contenu de la scène ni sur les paramètres et le mouvement de la caméra lors de l'acquisition; en particulier, nous nous plaçons dans un contexte de grandes scènes complexes et de longues séquences
Les outils méthodologiques et algorithmiques que nous utilisons sont ceux de la vision par ordinateur, géométrie projective, estimation de mouvement, codage et compression vidéo, communication vidéo, maillages triangulaires 2D et 3D, visualisation 3D.
Les études menées au sein du projet portent sur la création de représentations 3D de scènes vidéo et leur codage:
- Méthodes robustes d'estimation de disparité à partir d'une séquence d'images (thèse de Lionel Oisel et de Franck Galpin) ou d'une paire stéréo (thèse de Mohammed Rziza), en présence de reflets et transparence (stage de Bastien Peteuil)
- Obtention d'un modèle 3D à partir d'un champ dense de disparité : triangulation du champ de disparité par un critère de planarité (thèse de Lionel Oisel)
- Estimation automatique d'une série de modèles 3D à partir d'une séquence vidéo (thèse de Franck Galpin) démo
- Reconstruction de séquences réelles et virtuelles à partir de la représentation par modèles 3D (thèse de Franck Galpin) démo
- Application de la modélisation 3D au codage bas débit de scènes statiques (thèse de Franck Galpin) démo