Real-Time Capture, Reconstruction and Insertion into Virtual World of Human Actors - Inria - Institut national de recherche en sciences et technologies du numérique
Communication Dans Un Congrès Année : 2003

Real-Time Capture, Reconstruction and Insertion into Virtual World of Human Actors

Résumé

In this paper, we show how to capture an actor with no intrusive trackers and without any special environment like blue set, how to estimate its 3D-geometry and how to insert this geometry into a virtual world in real-time. We use several cameras in conjunction with background subtraction to produce silhouettes of the actor as observed from the different camera viewpoints. These silhouettes allow the 3D-geometry of the actor to be estimated by a voxel based method. This geometry is rendered with a marching cube algorithm and inserted into a virtual world. Shadows of the actor corresponding to virtual lights are then added and interactions with objects of the virtual world are proposed. The main originality of this paper is to propose a complete pipeline that can computes up to 30 frames per second. Since the rapidity of the process depends mainly on its slowest step, we present here all these steps. For each of them, we present and discuss the solution that is used. Some of them are new solutions, as the 3D shape estimation which is achieved using graphics hardware. Results are presented and discussed.

Mots clés

Real-time capture

Domaines

Synthèse d'image et réalité virtuelle [cs.GR]
Fichier principal
Vignette du fichier
VVG-2003.pdf (4.37 Mo) Télécharger le fichier
Vignette du fichier
b-slice-64x4.jpg (238.03 Ko) Télécharger le fichier
Vignette du fichier
a-extraction-4x3-v2.jpg (274.95 Ko) Télécharger le fichier
Vignette du fichier
aa-interaction-3D-bis.jpg (34.64 Ko) Télécharger le fichier
Vignette du fichier
c-30-MC-8-16-32-64.jpg (192.82 Ko) Télécharger le fichier
Vignette du fichier
d-30-voxel-8-16-32-64.jpg (186.41 Ko) Télécharger le fichier
Vignette du fichier
e-50-avecEtSansOmbreMC.jpg (74.56 Ko) Télécharger le fichier
Vignette du fichier
f-60-son-2-5.jpg (65.75 Ko) Télécharger le fichier
Vignette du fichier
h-salleV2.jpg (219.59 Ko) Télécharger le fichier
Origine Fichiers éditeurs autorisés sur une archive ouverte
Format Figure, Image
Format Figure, Image
Format Figure, Image
Format Figure, Image
Format Figure, Image
Format Figure, Image
Format Figure, Image
Format Figure, Image

Team Evasion  : Connectez-vous pour contacter le contributeur

https://inria.hal.science/inria-00510183

Soumis le : jeudi 14 octobre 2010-16:33:02

Dernière modification le : mercredi 18 décembre 2024-09:39:46

Archivage à long terme le : samedi 15 janvier 2011-02:25:24

Télécharger pour visualiser

Dates et versions

inria-00510183 , version 1 (14-10-2010)

Identifiants

  • HAL Id : inria-00510183 , version 1

Citer

Jean-Marc Hasenfratz, Marc Lapierre, Jean-Dominique Gascuel, Edmond Boyer. Real-Time Capture, Reconstruction and Insertion into Virtual World of Human Actors. Vision, Video and Graphics, Eurographics, 2003, Bath, United Kingdom. pp.49--56. ⟨inria-00510183⟩

Exporter

BibTeX XML-TEI Dublin Core DC Terms EndNote DataCite

Collections

UGA IMAG CNRS INRIA INRIA2
428 Consultations
451 Téléchargements

Partager

More