Vous êtes ici : GIPSA-lab > CRISSPAccueil CRISSP
 
Équipe

COGNITIVE ROBOTICS, INTERACTIVE SYSTEMS, & SPEECH PROCESSING
Responsable(s) d'équipe : Gérard BAILLYThomas HUEBER

L’équipe CRISSP mène des recherches fondamentales et appliquées dans le domaine de la communication parlée. Nos travaux visent notamment : 

    • à capturer, analyser et modéliser les différents signaux verbaux et co-verbaux mis en jeu dans une situation d’interaction communicationnelle entre deux humains, ou entre un humain et un robot humanoïde.
    • à mieux comprendre la production de la parole, en modélisant notamment les relations entre l’activité articulatoire (c’est-à-dire le mouvement de la langue, des lèvres, etc.), et le signal acoustique.
    • à mieux comprendre les mécanismes de communication chez les personnes malentendantes
    • à concevoir des outils technologiques pour la rééducation orthophonique, la suppléance vocale, le divertissement et les robots humanoïdes

 

Les 3 axes de recherches de l’équipe CRISSP sont :

    • Robotique cognitive : développer les capacités socio-communicatives de robots humanoïdes communicants.
    • Systèmes interactifs : développer des systèmes réactifs de communication « augmentée » exploitant des caractéristiques multimodales de la parole (son, vision, gestes).
    • Traitement de la parole : étude de l’appareil de production de la parole (modélisation articulatoire-acoustique), synthèse vocale et conversion de voix.

Domaines d’expertises de l’équipe

    • Traitement du signal audio (analyse, compression, filtrage, débruitage par séparation de sources, etc.) et en particulier le signal de parole (analyse, transformation, morphing, reconnaissance automatique, synthèse à partir du texte, synthèse articulatoire, inversion acoustico-articulatoire)
    • Modélisation par apprentissage statistique (machine learning
    • Acquisition de données articulatoires (electrographie electromagnétique (EMA), imagerie ultrasonore, IRM, video rapide, EMG).
    • Conception de protocoles expérimentaux nécessitant l’acquisition simultanée de différents signaux verbaux et co-verbaux sur un ou plusieurs humains en situation d’interaction (motion capture, eye-tracking, etc.)

 

Les membres

(photo prise le 18/12/2015)

 

Contact : Gérard Bailly et Thomas Hueber (e-mail : prenom.nom@gipsa-lab.fr)




Dernières publications de l'équipe

Online Localization of Multiple Moving Speakers in Reverberant Environments

Xiaofei Li, Bastien Mourgue, Laurent Girin, Sharon Gannot, Radu Horaud. Online Localization of Multiple Moving Speakers in Reverberant Environments. SAM 2018 - The Tenth IEEE Workshop on Sensor Array and Multichannel Signal Processing, Jul 2018, Sheffield, United Kingdom. pp.1-5. 〈hal-01795462〉

Immersive Teleoperation of the Eye Gaze of Social Robots Assessing Gaze-Contingent Control of Vergence, Yaw and Pitch of Robotic Eyes

Remi Cambuzat, Frédéric Elisei, Gérard Bailly, Olivier Simonin, Anne Spalanzani. Immersive Teleoperation of the Eye Gaze of Social Robots Assessing Gaze-Contingent Control of Vergence, Yaw and Pitch of Robotic Eyes. ISR 2018 - 50th International Symposium on Robotics, Jun 2018, Munich, Germany. pp.232-239, 2018, 〈https://www.vde.com/en/events/isr〉. 〈hal-01779633〉

PySFC - A System for Prosody Analysis based on the Superposition of Functional Contours Prosody Model

Branislav Gerazov, Gérard Bailly. PySFC - A System for Prosody Analysis based on the Superposition of Functional Contours Prosody Model. 9th International Conference on Speech Prosody 2018, Jun 2018, Poznan, Poland. ISCA, 9th International Conference on Speech Prosody 2018 pp.774-778, 〈10.21437/SpeechProsody.2018-157〉. 〈hal-01821214〉


Voir toutes les publications de l'équipe dans HAL
GIPSA-lab, 11 rue des Mathématiques, Grenoble Campus BP46, F-38402 SAINT MARTIN D'HERES CEDEX - 33 (0)4 76 82 71 31