Analysis, recognition and synthesis of expressions and styles in movements
Analyse, reconnaissance et synthèse d’expressions et de styles dans les mouvements
Résumé
Emotions are an important aspect of daily life. They are expressed through different channels, some of which are visual : facial expressions, postures and body movements. In addition to speech, this is an important means of communication that can provide or capture information about a person’s emotional state. In computer science, applications seeking to take into account the emotional state of the user or seeking to produce expressive virtual characters are increasingly numerous : education, medicine, commerce, security, robotics and entertainment (cinema, video games, etc.). In their human-machine interactions, these applications try to move towards gestural and conversational interactions where expressions take an important place. In image synthesis, animated virtual characters are present everywhere in video media such as movies, video games or virtual worlds. The way these characters move, act in their world and interact is an important focus for their creators. And to make them lively and attractive, they need realistic gestures and emotions. To meet this expectation, systems must be able to analyze and understand the behaviors, i.e. the emotional state, of a person, but they must also be able to produce or assist in the production of high quality, expressive and diverse animation. Our work takes place in this perspective of understanding, recognizing and synthesizing gestures, movements, animations of the face and body producing an expression or a style. The notion of expression and style is the common thread of our work in computer vision and animation synthesis. We offer advances in facial and body expression analysis and recognition, as well as in animation synthesis and editing with a particular style or expression.
Les émotions sont un des aspects importants de la vie quotidienne. Elles s’expriment par différents canaux, dont certains sont visuels comme les expressions du visage, les postures et les mouvements du corps. En complément de la parole, il s’agit là d’un moyen de communication important qui permet de fournir ou de capter des informations sur l’état émotionnel d’une personne. En informatique, les applications cherchant à prendre en compte l’état émotionnel de l’utilisateur ou cherchant à produire des personnages virtuels expressifs sont de plus en plus nombreuses : l’éducation, la médecine, le commerce, la sécurité, la robotique et les loisirs (cinéma, jeux vidéo, etc.). Dans leurs interactions homme-machine, ces applications essaient de tendre vers des interactions gestuelles et conversationnelles où les expressions prennent une place importante. En synthèse d’images, les personnages virtuels animés sont présents partout dans les médias vidéo tels que les films, les jeux vidéo ou les mondes virtuels. La façon dont ces personnages se déplacent, agissent dans leur monde et interagissent est un point d’attention important pour leurs créateurs. Et pour les rendre vivants et attractifs, il faut les doter de gestes réalistes et d’émotions. Pour répondre à cette attente, les systèmes doivent être capables d’analyser et de comprendre les comportements, c’est-à-dire l’état émotionnel, d’une personne, mais ils doivent aussi être capables de produire ou d’aider à la production d’une animation de haute qualité, expressive et diversifiée. Nos travaux s’inscrivent dans cette optique de comprendre, reconnaître et synthétiser des gestes, des mouvements, des animations du visage et du corps produisant une expression ou un style. La notion d’expression et de style est le fil conducteur de nos travaux en vision par ordinateur et en synthèse d’animations. Nous proposons des avancées en analyse et reconnaissance d’expressions faciales et corporelles; ainsi qu’en synthèse et édition d’animations comportant un style ou une expression particulière.
| Origine | Fichiers produits par l'(les) auteur(s) |
|---|