"Les premières secondes comptent : gérer les premières impressions pour un agent virtuel plus engageant"

Lors de toute rencontre les premiers instants sont critiques et les impressions que l’on forme des autres sont importantes. Le projet IMPRESSIONS vise à créer des modèles computationnels de comportement communicatif pour des agents conversationnels animés (ACA) afin de gérer les premières impressions lorsqu'ils interagissent avec leurs utilisateurs. Ces modèles comprennent la capacité de générer et réaliser des comportements verbaux et non verbaux (par exemple, le sourire, le regard, les gestes) adaptés au comportement de l'utilisateur ainsi qu'à son état physiologique. Les modèles de computationnels du comportement comprennent la génération de comportements adaptatifs pour gérer les premières impressions de chaleur et compétence. Des techniques non-intrusives qui avancent l'état de l'art du domaine des signaux physiologiques sont utilisées pour détecter / déduire l'état physiologique de l'utilisateur durant les premiers moments d'interaction avec l'ACA. Le projet inclut également la conception et la réalisation d'expériences utilisateurs et une collaboration avec le Musée d'histoire naturelle de Neuchâtel en Suisse pour un déploiement public d'un ACA.

Le projet IMPRESSIONS est financé par l'ANR et il est réalisé en partenariat entre le CNRS-ISIR à SORBONNE Université en France et le Swiss Centre for Affective Computing à l'Université de Genève en Suisse.

WORKPACKAGES :

¢ WP1: Définition, analyse et détection de la première impression

• Collection d’un corpus

• Détection temps réel des comportements de l’utilisateur et des signaux physiologiques

¢ WP2: Contrôle de la première impression

• Développer chez l’agent des mécanismes d’adaptation afin de gérer les impressions visées

• Générer un comportement non-verbal pour donner une première impression de chaleur et de compétence à l’utilisateur et maintenir cette impression

¢ WP3: définition d’une application, intégration de système et évaluation

• Application: déploiement de l’agent dans un musée avec l’objectif d’échanger avec les visiteurs sur l’exposition du musée.

• Évaluation subjective et objective: crédibilité et efficacité de l’agent

PUBLICATIONS :

· Wang, C., Pun, T., & Chanel, G. (2018). A Comparative Survey of Methods for Remote Heart Rate Detection From Frontal Face Videos. Frontiers in Bioengineering and Biotechnology, 6(33).

· Chen Wang, Phil Lopes, Thierry Pun, and Guillaume Chanel. 2018. Towards a better gold standard: Denoising and modelling continuous emotion annotations based on feature agglomeration and outlier regularisation. In 2018 Audio/Visual Emotion Challenge and Workshop (AVEC’18), October 22, 2018, Seoul, Republic of Korea. ACM, New York, NY, USA

· Wang, C. (2017). Detecting and managing impressions for a more engaging virtual agent. In The 6th International Workshop on Symbiotic Interaction.

· B. Biancardi, A. Cafaro, C. Pelachaud, "Could a Virtual Agent be Warm and Competent? Investigating User's Impressions of Agent's Non-Verbal Behaviours", Workshop "Investigating Social Interactions with Artificial Agents", Glasgow, November 2017.

· B. Biancardi, "Towards a Computational Model for First Impressions Management", Doctoral Consortium of 19th ACM International Conference on Multimodal Interaction, Glasgow, November 2017.

· B. Biancardi, A. Cafaro, C. Pelachaud, "Analyzing First Impressions of Warmth and Competence from Observable Nonverbal Cues in Expert-Novice Interactions", 19th ACM International Conference on Multimodal Interaction, Glasgow, November 2017.

· B. Biancardi, A. Cafaro, C. Pelachaud, "Investigating the role of gestures, arms rest poses and smiling in first impressions of competence.", at Virtual Social Interaction Workshop, Bielefeld, German, July 2017.

· B. Biancardi, A. Cafaro and C. Pelachaud "Gérer les premières impressions de compétence et de chaleur à travers des indices non verbaux.'', In Quatorzièmes Rencontres des Jeunes Chercheurs en Intelligence Artificielle (RJCIA 2017), July 2017, Caen, France.

· B. Biancardi, A. Cafaro, C. Pelachaud, "Investigating User's First Impressions of a Virtual Agent's Warmth and Competence Traits.'', in Workshop Affect, Compagnon Artificiel, Interaction (WACAI), June 2016

Partenaires :

CNRS-ISIR, Sorbonne Université (coordinateurs):

· Beatrice Biancardi | Doctorante

· Angelo Cafaro | Chercheur contractuel

· Paul Lerner | Master

· Maurizio Mancini  | University of Cork  | collaborator

· Catherine Pelachaud | Directrice de recherches

University of Geneva

· Chen Wang | Doctorante

· Theodoros Kostoulas | Maître-assistant | Université de Bournemouth

· Guillaume Chanel | Maître-assistant

· Thierry Pun | Professeur d'Universités

· Phil Lopes | Chercheur contractuel