RoboTrio Afficher en francais Show in English
Recueil, modélisation et évaluation d'interactions sociales entre un robot et des partenaires humains dans une tâche d'interview et de remplissage de formulaire numérique
Collecting, modeling and evaluating social interactions between a robot and human partners in a digital interview and form-filling task.

Le projetThe project

  

RoboTrio

 

Coordonnateur du projet : Principal investigator : Frédéric ELISEI

Projet réalisé grâce au soutien de :Funded by: CNRS - PEPS

Durée du projet : Projet duration: 2018 + 2019

 

ObjectifsObjectives

 

    Recueil, modélisation et évaluation d'interactions sociales entre un robot et des partenaires humains dans une tâche d'interview et de remplissage de formulaire numérique.

    Collecting, modeling and evaluating social interactions between a robot and human partners in a digital interview and form-filling task.

 

MéthodologieMethodology

 

    Ce projet est ancré sur la conception et l'étude d'une interaction sociale entre un robot "intervieweur" et deux interlocuteurs humains, dans des tâches de collecte et partage d'informations (remplissage de formulaire par le robot, obtention de renseignements pour les humains).

     

    Il s'appuyera sur la plateforme Mical, qui fournit une plateforme de télé-opération immersive d'un robot :

    This project is rooted in the design and study of a social interaction between an "interviewer" robot and two human interlocutors, in information gathering and sharing tasks (form filling by the robot, obtaining information for the humans).

     

    It will be based on the Mical platform, which provides an immersive teleoperation of a robot: the Nina robot, facing its virtual tablet and two human partners.

    Le robot Nina, face à sa tablette virtuelle et deux partenaires humains

     

    Le but de cette télé-opération immersive est de collecter des données d'interactions entre robot et interlocuteurs (étape 1) : parole, regards, tours de parole, backchannels, avec un robot humanoïde complexe (lèvres, mâchoire, tête et regard articulés). Ce corpus original permettra d'étudier et modéliser ce type d'interactions dans les domaines de prédilection respectifs : parole et langage au LPL, signaux co-verbaux au GIPSA, aspects physiologiques/cognitifs à l'INT. Coté synthèse (étape 2), l'accent sera mis sur les signaux co-verbaux : regard du robot (ou d'agent conversationnel) et direction de la tête. L'évaluation (étape 3) comparera 2 paradigmes de validation : jugement vidéo en ligne et signaux électrodermaux.

    The aim of this immersive teleoperation is to collect data on interactions between robot and interlocutors (stage 1): speech, gazes, turns of speech, backchannels, with a complex humanoid robot (articulated lips, jaw, head and gaze). This original corpus will enable us to study and model this type of interaction in our respective fields of expertise: speech and language at LPL, co-verbal signals at GIPSA, physiological/cognitive aspects at INT. On the synthesis side (stage 2), the focus will be on co-verbal signals: robot (or conversational agent) gaze and head direction. Evaluation (step 3) will compare 2 validation paradigms: on-line video judgment and electrodermal signals.

     

Le scénarioThe scenario

 

Le robot est l'animateur et l'arbitre d'un jeu collaboratif. Il propose un thème aux joueurs, et leur demande d'essayer de retrouver les mots les plus cités par d'autres joueurs. Chaque fois qu'ils se mettent d'accord sur une proposition, le robot consulte la tablette pour connaître le score du mot proposé. Après 5 propositions, on change de thème. En plus d'un thème d'entrainement (formule), 8 thèmes sont joués (dans un ordre aléatoire). The robot is the host and referee of a collaborative game. It proposes a theme to the players, and asks them to try to find the words most quoted by other players. Each time they agree on a proposal, the robot consults the tablet to find out the score for the word proposed. After 5 proposals, the theme changes. In addition to a training theme (formula), 8 themes are played (in random order).

 

Quelles propositions
pour Kermesse ?
Suggestions
for Kermesse?
(school fair)

 
14%Foire
25%Fête
0%Village
Ville
Place
23%École
Manège
Orchestre
0%Musique
19%Stand
18%Jeux
14%Chamboule-tout
10%Enfants
01%Tombola

 

PartnersPartenaires

 

    INT, MarseilleThierry Chaminade
    LPL, Aix-en-ProvenceLaurent Prévot, Noël Nguyen
    GIPSA-lab, GrenobleFrédéric Elisei, Gérard Bailly