Reconstruction géométrique par estimation de posture
Résumé
Geometrical reconstruction from multiple cameras can now concurrence classical reconstruction. Shape From Silhouette (SFS) is a method that estimates the Visual Hull, in real time from observed silhouette in each view. Despite the fact that SFS is really simple and robust, it produces ghost parts: a set of 3D points that does not belong to real objects. These parts can significantly disturb the precision and the realism of the 3D shape. In this paper, we suggest to use the motion estimation of people, getting from motion capture, in order to remove these ghost parts and refine geometry. By construction, SFS gives a 3D hull of the filmed person. If we transform the computed geometry from original pose to the current pose, the intersection of reconstruction and observed pose produces a more precise reconstruction than the classical SFS. In this work, we introduce a real time and incremental approach, which automatically refines the 3D reconstruction of the acquired object.
La reconstruction de la géométrie à partir de caméras est un domaine qui pourrait concurrencer les reconstructions classiques. Parmi les méthodes de reconstruction 3D à partir de plusieurs vues, la méthode Shape From Silhouette (SFS)[4] permet d'estimer en temps réel un volume englobant d'un objet (un humain dans notre cas) à partir de ses silhouettes observées dans chaque vue. En dehors de sa simplicité d'implémentation et de sa robustesse, SFS produit des formes qui contiennent des entités fantômes : ensemble de points 3D qui n'appartiennent pas aux objets d'intérêts. Ces entités peuvent fortement perturber la précision et le réalisme de la forme 3D reconstruite. Dans cet article nous proposons d'utiliser l'information additionnelle de posture de la personne obtenue par un procédé de capture de mouvement, afin de supprimer ces entités fantômes et d'affiner la géométrie. Par construction l'approche SFS fournit une forme 3D englobante de la personne filmée. Ainsi si l'on transforme la géométrie calculée d'une posture de référence vers la posture courante, l'intersection des reconstructions fournit une reconstruction plus précise que l'approche SFS classique. Dans ces travaux, nous présentons une approche temps réel incrémentale, qui affine automatiquement la reconstruction 3D de la personne filmée au cours du temps.
Origine | Fichiers produits par l'(les) auteur(s) |
---|
Loading...