Vous êtes ici : GIPSA-lab > Recherche
Chargement

MICAL

Etude de l'interaction face à face

Référent(s) scientifique(s) : Gerard BAILLY
Responsable technique : Frédéric ELISEI

 

La plateforme MICAL est une plate-forme hybride (hardware + software) dédiée à l'enregistrement et l'étude de l'interaction face-à-face.


DESCRIPTION

En plus de proposer un certain nombre de capteurs pertinents (capture du regard de deux sujets, capture des mouvements de tête, caméras, microphones, prompteur vidéos...) elle permet de mettre le ou les sujets en situation de les produire et de les percevoir naturellement, sans briser la rétroaction ni transmettre de canaux autres que ceux enregistrés. Les capteurs sont conjugués à des moyens informatiques, de synthèse ou d'analyse, pilotés en temps-réel tant par du logiciel que par des comparses eux-mêmes instrumentés, dans deux salles séparées par une vitre semi-réfléchissante. On peut ainsi enregistrer de façon synchrone différents types de face-à-face (jeux de langage, manipulations autour de tâches coopératives...) entre un sujet humain et un comparse qui peut être représenté par un agent conversationnel incarné (clone 3D piloté en Magicien d'Oz ou par des modèles appris précédemment).

 

 

Depuis septembre 2014, la plateforme Mical accueille un robot iCub2 pour mettre ces modèles en situation :

Face à face avec le robot iCub Nina Face à face avec le robot iCub Nina

Interaction face à face avec le robot NINA

 GALERIE PHOTO

L'utilisateur du système est visible en vidéo Interaction en magicien d'Oz : un comparse pilote le clone 3D
Interaction face à face avec occulomètres, entre un sujet humain (gauche) et un comparse pilotant un clone 3D (droite)


Capture des mouvements de tête et du regard en face à face
Scénario de tâche coopérative (manipulations de cubes),
avec capture des mouvements de tête et occulomètre portable

 

Pilotage d'un clone en temps-réel par une comparse par capture de mouvement
Capture de mouvement pour le pilotage en temps réel d'un clone 3D par une comparse




Galerie Video


    Suivi d'une conversation simulee (enregistrement des mouvements de la tete et des yeux)



    Animation du robot a partir de mouvements captures sur l'humain (mouvements de tete, yeux, parole)

 

 

 


GIPSA-lab, 11 rue des Mathématiques, Grenoble Campus BP46, F-38402 SAINT MARTIN D'HERES CEDEX - 33 (0)4 76 82 71 31