Influence of image features on face portraits social context interpretation: experimental methods, crowdsourcing based studies and models - Archive ouverte HAL Access content directly
Theses Year : 2015

Influence of image features on face portraits social context interpretation: experimental methods, crowdsourcing based studies and models

Influence des caractéristiques des images de portrait sur l’interprétation de leur contexte social: méthodologie expérimentale, évaluation par crowdsourcing et modèles

(1)
1

Abstract

Online communities and social networks are more and more present in everyday life. On these networks, people build a virtual profile and interact between them for many different purposes: to be in touch with friends, for business, to make new connections, to find a love partner... Online profiles should be coherent with these tasks, starting with the omnipresent profile picture, as different pictures of the same subject can convey very different messages. This thesis focuses on which elements inside a profile picture modify the perception of the context that best suits the picture itself. We define this concept borrowing the "social context" concept in psychology. Image features considered are both low and high level; while the first are more technical quantities related to the sole pixels values (i.e. brightness, contrast), the latter are related to the understanding of the scene depicted in the picture. These elements are underlined by results of research on psychology (i.e. influence of clothing or gaze direction in social interactions). These features have been evaluated through crowdsourcing, a relatively new technique that exploits the power of the web to outsource simple tasks. We adopted the same technique to gather social context evaluations, being this a subjective perception. Then, through different mathematical approaches, we modelled the social context with image features, to understand and quantify the influence of each feature. Results are in line with empirical experience.
Les réseaux sociaux occupent une part croissante de notre vie quotidienne. Sur ces réseaux, les participants constituent un profil virtuel leur permettant d’interagir avec d’autres dans un but précis : rester en contact avec ses amis, entretenir son réseau professionnel, trouver l’amour... Ce profil doit être cohérent avec le contexte dans lequel il est utilisé. Et en particulier la photo de profil, car différentes image de la même personne peuvent transmettre des messages très différents. Dans cette thèse, nous étudions les éléments des photos de portrait pouvant modifier la perception du contexte d’utilisation le plus adapté. Nous définissons ce concept en empruntant la notion de "contexte social" à la psychologie. Pour notre étude, nous prenons en compte des caractéristiques d’image de bas et haut niveau. Les premières sont directement liées aux valeurs des pixels de l’image (ex : contraste). Les secondes sont quant à elles liées à l’interprétation de la scène (ex : influence de l’habillement lors des interactions sociales). L’étiquetage des caractéristiques de haut niveau a été réalisé par crowdsourcing, une technique récente exploitant la puissance du web afin d’externaliser des tâches simples. Nous avons exploité cette même technique afin de recueillir les évaluations du contexte social dans lequel nos images de portrait seraient le plus à même d’être utilisées. Puis nous avons modélisé les liens entre les différentes caractéristiques des images et le contexte social. Il a ainsi été possible de quantifier l’influence de chaque caractéristique, les résultats obtenus étant cohérent avec l’expérience empirique.
Fichier principal
Vignette du fichier
These.pdf (34.8 Mo) Télécharger le fichier
Loading...

Dates and versions

tel-01291459 , version 1 (21-03-2016)

Identifiers

  • HAL Id : tel-01291459 , version 1

Cite

Filippo Mazza. Influence of image features on face portraits social context interpretation: experimental methods, crowdsourcing based studies and models. Signal and Image Processing. Ecole Centrale de Nantes (ECN), 2015. English. ⟨NNT : ⟩. ⟨tel-01291459⟩
251 View
318 Download

Share

Gmail Facebook Twitter LinkedIn More