Flot de scène

Show full item record

Files in this item

PDF TraitSignal_2012_29_3_255_Article.pdf 11.47Mb

Pour citer ce document :
URI: http://hdl.handle.net/2042/70398
Title: Flot de scène
Author: Letouzey, Antoine; Petit, Benjamin; Boyer, Edmond
Abstract: Dans cet article nous nous intéressons à l'estimation des champs de déplacement 3D denses d'une scène non rigide, en mouvement, capturée par un système multicaméra. La motivation vient des applications multicaméras qui nécessitent une information de mouvement pour accomplir des tâches telles que le suivi de surface ou la segmentation. Dans cette optique nous présentons une approche nouvelle qui permet de calculer efficacement un champ de déplacement 3D, en utilisant des informations visuelles de bas niveau et des contraintes géométriques. La contribution principale est la proposition d'un cadre unifié qui combine des contraintes de flot pour de petits déplacements et des correspondances temporelles éparses pour les déplacements importants. Ces deux types d'informations sont fusionnés sur une représentation surfacique de la scène en utilisant une contrainte de rigidité locale. Le problème se formule comme une optimisation linéaire permettant une implémentation rapide grâce à une approche variationnelle. La méthode proposée s'adapte de manière quasi identique que les informations de surface proviennent d'une reconstruction 3D complète, par exemple en utilisant l'enveloppe visuelle, ou d'une simple carte de profondeur. Les expérimentations menées sur des données synthétiques et réelles démontrent les intérêts respectifs du flot et des informations éparses, ainsi que leur efficacité conjointe pour calculer les déplacements d'une scène dynamique.In this paper we study the estimation of dense, instantaneous 3D motion fields over a non-rigidly moving surface observed by multi-camera systems. The motivation arises from multi-camera applications that require motion information, for arbitrary subjects, in order to perform tasks such as surface tracking or segmentation. To this aim, we present a novel framework that allows to efficiently compute dense 3D displacement fields using low level visual cues and geometric constraints. The main contribution is a unified framework that combines flow constraints for small displacements with temporal feature constraints for large displacements and fuses them over a surface representation of the scene using local rigidity constraints. The resulting linear optimization problem allows for variational solutions and fast implementations. The proposed method adapts well wether geometric information arise from a complete 3D reconstruction, such as visual hull, or a depth map. Experiments conducted on synthetic and real data demonstrate the respective roles of flow and feature constraints as well as their ability to provide robust surface motion cues when combined
Subject: déplacement 3D; flot de scène; carte de profondeur; surface; 3D motion; scene flow; depth map; surface
Publisher: Lavoisier
Date: 2012

This item appears in the following Collection(s)

Show full item record





Advanced Search