RES: computing the interactions between real and virtual objects in video sequences
Résumé
Possibilities for dynamic interactions of people with machines created by combination of virtual reality and communication networking provide new interesting problems at the intersection of two domains (among others): computer vision and computer graphics. In this paper, a technical solution to one of these problems is presented to automate the mixing of real and synthetic objects in a same animated video sequence. Current approaches usually involve mainly 2D-based effects and rely heavily on human expertise and interaction. We aim at achieving close interaction between 3D-based analysis and synthesis techniques to compute the interaction between a real scene captured in a sequence of calibrated images, and a computer-generated environment.
Les possibilités d'interaction dynamique entre humains et machines issue de la combinaison de la réalité virtuelle et des réseaux de communication engendrent de nouveaux problèmes interessants à l'intersection de deux domaines (entre autres): la vision artificielle et la synthèse d'images. Dans ce papier nous proposons une solution à l'un de ces problèmes, permettant de mixer automatiquement des objets réels et virtuels dans une même séquence vidéo animée. Les approches usuelles se basent essentiellement sur des effets 2D, et s'appuient fortement sur l'expertise et l'interaction humaine. Notre but est d'atteindre une intégration étroite entre les techniques d'analyse et de synthèse 3D afin de calculer l'interaction entre une scène réelle capturée issue d'une séquence d'images calibrées, et un environnement virtuel.
