Titre : Animation virtuelle 3D d`acteurs réels pour logiciels de post

Titre : Animation virtuelle 3D d’acteurs réels pour logiciels de post-production
Thématique : Informatique graphique, animation, reconstruction 3D, maillages
Laboratoire, institution et université (Ville et pays):
Equipe RVM, laboratoire CReSTIC, Université de XD Productions,
Reims Champagne-Ardenne,
94360 Bry sur Marne
http://crestic.univ-reims.fr/
http://www.xdprod.net/site_xdprod_net/
Equipe ou projet dans le labo : Equipe RVM du laboratoire CReSTIC et équipe R&D de XDProductions
Nom et adresse électronique des directeurs de stage :
Celine Loscos, [email protected], Laurent Lucas, [email protected], Philippe Souchet,
[email protected]
Nom et adresse électronique du directeur du laboratoire : Bernard Riera, [email protected]
Présentation générale du domaine : Le sujet proposé s’inscrit dans une
collaboration académie-industrie, XD Production possède un studio de captation
3D d’acteurs utilisé pour la télévision et le cinéma. Le studio spécialisé, au fond
monochrome, est muni d’un système omnidirectionnel de caméras
synchronisées dans lequel un acteur peut travailler dans une grand espace de
déplacement et sans contraintes vestimentaires. A partir des images
synchronisées des caméras, un maillage de l’acteur est reconstruit. L’insertion de ce type de modèle dans
les outils de post-production est difficile car toutes les poses reconstruites de l’acteur sont décorrélées.
Objectifs du stage : L’objectif du stage est de fournir une solution stable pour
transformer une séquence de maillages indépendants en un modèle unique animé,
insérable ensuite dans le pipeline de production. Le travail s’appuiera sur le travail
collaboratif réalisé ces 3 dernières années, proposant une solution d’animation
pseudo-rigide guidée par une estimation du flot de mouvement. Cette solution
comporte des limites, notamment lors de changements topologiques, comme par
exemple lors du contact d’une partie du corps avec une autre, ou de mouvements
rapides. Le travail demandé sera de trouver une méthode de détection automatique des
phases d’erreurs de l’algorithme par seuillage, et de proposer une solution de recalage
du maillage ayant un effet visuel et topologique moindre sur le maillage dynamique. Les
données d’entrée sont l’ensemble des maillages reconstruits à chaque pas de la
séquence d’animation ainsi que les vues de chaque caméra. Il est ainsi possible de s’appuyer sur les
enveloppes visuelles pour déterminer la qualité du recalage. De plus, une navigation avant-arrière dans la
séquence devrait permettre une stabilisation et un lissage des choix d’animation du maillage.
Références bibliographiques :
[1] L. Blache, C. Loscos et L. Lucas, Robust motion flow for mesh tracking of freely moving actors. Springer
Berlin Heidelberg, The Visual Computer, 32(2):205-216, décembre 2015.
[2] L. Blache, M. Desbrun, C. Loscos et L. Lucas, Time-varying surface reconstruction of an actor's
performance, 11th International Symposium on Visual Computing (ISVC), Lecture Notes in Computer
Science, vol. 9474, pp 92-101, Springer International Publishing, Las Vegas, Nevada, USA, décembre 2015.
[3] L. Lucas et al., RECOVER3D: A hybrid multi-view system for 4D reconstruction of moving actors, 4th
International Conference and Exhibition on 3D Body Scanning Technologies (3DBST), pp 219-230, Nicola
D’Apuzzo, Hometrica Consulting, Long Beach, CA, USA, novembre 2013.
Compétences espérées : progammation C++, OpenGL, Synthèse d’image (concepts)