Coding of tag models
Codage des modèles de tags
Résumé
Annotating images using a fixed number of concepts is a fundamental task for content based image retrieval and classification. In practice, several modalities (visual, text...) provide information about the content of images. We are specifically interested in the tags associated with images, usually resulting from folksonomy, that provide imperfect and partially relevant information. We propose two tag models bearing such imperfections, one modeling the phenomenon through a threshold which is automatically set according to semantic similarity with visual concepts, and the other improving the coding scheme of bags-of-words, inspired from recent work carried out in image classification. All this work is validated on several publicly available databases commonly used in the field of image annotation. The experimental results show that the proposed methods are beyond the state of the art while remaining less computationally expensive
Annoter des images selon un nombre fini de concepts fixés a priori est une tâche fon- damentale permettant la recherche d'images par le contenu. En pratique, plusieurs modalités (visuelle, textuelle...) fournissent des informations sur le contenu des images. Notre intérêt porte ici sur les tags associés aux images, généralement issus d'une indexation personnelle, fournissant une information imparfaite et partiellement pertinente. Nous proposons deux modè- les de tags pour pallier de telles imperfections, l'un modélisant le phénomène au moyen d'un seuil établi automatiquement selon la similarité sémantique avec les concepts visuels, et l'autre améliorant le schéma de codage des sacs-de-mots en s'inspirant de récents travaux effectués en classification d'images. L'ensemble de ces travaux est validé sur plusieurs bases d'images publiques et couramment utilisées dans le domaine de l'annotation d'images. Les résultats expérimentaux montrent que les méthodes proposées dépassent l'état de l'art tout en restant moins coûteuses en calculs que les travaux récents dans le domaine.