Influence of image features on face portraits social context interpretation: experimental methods, crowdsourcing based studies and models
Influence des caractéristiques des images de portrait sur l’interprétation de leur contexte social: méthodologie expérimentale, évaluation par crowdsourcing et modèles
Résumé
Online communities and social networks are more and
more present in everyday life. On these networks,
people build a virtual profile and interact between
them for many different purposes: to be in touch with
friends, for business, to make new connections, to find
a love partner... Online profiles should be coherent
with these tasks, starting with the omnipresent profile
picture, as different pictures of the same subject can
convey very different messages. This thesis focuses
on which elements inside a profile picture modify the
perception of the context that best suits the picture
itself. We define this concept borrowing the "social
context" concept in psychology. Image features
considered are both low and high level; while the first
are more technical quantities related to the sole pixels
values (i.e. brightness, contrast), the latter are related
to the understanding of the scene depicted in the
picture. These elements are underlined by results of
research on psychology (i.e. influence of clothing or
gaze direction in social interactions). These features
have been evaluated through crowdsourcing, a
relatively new technique that exploits the power of the
web to outsource simple tasks. We adopted the same
technique to gather social context evaluations, being
this a subjective perception. Then, through different
mathematical approaches, we modelled the social
context with image features, to understand and
quantify the influence of each feature. Results are in
line with empirical experience.
Les réseaux sociaux occupent une part croissante de
notre vie quotidienne. Sur ces réseaux, les
participants constituent un profil virtuel leur permettant
d’interagir avec d’autres dans un but précis : rester en
contact avec ses amis, entretenir son réseau
professionnel, trouver l’amour... Ce profil doit être
cohérent avec le contexte dans lequel il est utilisé. Et
en particulier la photo de profil, car différentes image
de la même personne peuvent transmettre des
messages très différents. Dans cette thèse, nous
étudions les éléments des photos de portrait pouvant
modifier la perception du contexte d’utilisation le plus
adapté. Nous définissons ce concept en empruntant la
notion de "contexte social" à la psychologie. Pour
notre étude, nous prenons en compte des
caractéristiques d’image de bas et haut niveau. Les
premières sont directement liées aux valeurs des
pixels de l’image (ex : contraste). Les secondes sont
quant à elles liées à l’interprétation de la scène (ex :
influence de l’habillement lors des interactions
sociales). L’étiquetage des caractéristiques de haut
niveau a été réalisé par crowdsourcing, une technique
récente exploitant la puissance du web afin
d’externaliser des tâches simples. Nous avons
exploité cette même technique afin de recueillir les
évaluations du contexte social dans lequel nos images
de portrait seraient le plus à même d’être utilisées.
Puis nous avons modélisé les liens entre les
différentes caractéristiques des images et le contexte
social. Il a ainsi été possible de quantifier l’influence
de chaque caractéristique, les résultats obtenus étant
cohérent avec l’expérience empirique.
Loading...