Extraction et comparaison d'information saillante : Pose favorable et image 2D révélatrice d'un objet 3D - Archive ouverte HAL
Communication Dans Un Congrès Année : 2021

Extraction et comparaison d'information saillante : Pose favorable et image 2D révélatrice d'un objet 3D

Marie Pelissier-Combescure
Géraldine Morin
Sylvie Chambon

Résumé

The objective of this paper is to quantify the information relative to a 3D object contained in a 2D image, by estimating, on the one hand, the interest of its pose and, on the other hand, the interest of the 2D observed representation. The goal is to extract, from these two different and complementary modalities, the essential information belonging to the object in the image. This information is computed by matching salient elements between the 2D image and the3D mesh. For this detection step, we use a detector between2D and 3D, based on the curvilinear saliency, that ensures the best possible repeatability for salient elements in different modalities. We are thus able to identify the pose that best highlights the 3D object based on the detected points of interest. Using a similar approach, we also quantify if the 2D image that contains this object highlights it. In particular, given a set of poses and images, we are able to order these poses and images according to their saliency : the interest of the pose and the relevance of the 2D image.
L’objectif de ce papier est d’introduire une approche permettant de quantifier l’information d’un objet 3D présente dans une image 2D, en distinguant, d’une part, l’intérêt de sa pose et, d’autre part, l’intérêt de l’image 2D que nous observons. L’objectif est d’extraire, à partir de ces deux modalités différentes et complémentaires, l’information essentielle appartenant à l’objet dans l’image. Cette information s’obtient par extraction d’éléments saillants à partir de l’image 2D et du maillage 3D. Pour cette étape de détection, nous avons choisi d’utiliser un détecteur qui nous assure la meilleure répétabilité possible entre 2D et 3D. Ce détecteur s’appuie sur la saillance curviligne. Nous proposons alors de déterminer la pose mettant le plus en valeur l’objet 3D s’appuyant sur les points d’intérêt détectés. Nous introduisons également une méthode qui nous permet de déterminer si l’image 2D qui contient cet objet est révélatrice de cet objet. Plus précisément, connaissant un en- semble de poses et un ensemble d’images, nous sommes en capacité de proposer un classement de ces poses et de ces images en fonction de l’information saillante contenue
Fichier principal
Vignette du fichier
Orasis_version_finale.pdf (4.49 Mo) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)

Dates et versions

hal-03339730 , version 1 (09-09-2021)
hal-03339730 , version 2 (09-05-2022)

Identifiants

  • HAL Id : hal-03339730 , version 1

Citer

Marie Pelissier-Combescure, Géraldine Morin, Sylvie Chambon. Extraction et comparaison d'information saillante : Pose favorable et image 2D révélatrice d'un objet 3D. 18èmes journées francophones des jeunes chercheurs en vision par ordinateur (ORASIS 2021), Centre National de la Recherche Scientifique [CNRS]; Equipe REVA, IRIT : Institut de Recherche en Informatique de Toulouse., Sep 2021, Saint Ferréol, France. pp.1-9. ⟨hal-03339730v1⟩

Collections

ORASIS2021
247 Consultations
92 Téléchargements

Partager

More