Vous êtes ici : GIPSA-lab > CRISSPAccueil CRISSP
 
Équipe

COGNITIVE ROBOTICS, INTERACTIVE SYSTEMS, & SPEECH PROCESSING
Responsable(s) d'équipe : Gérard BAILLYThomas HUEBER

L’équipe CRISSP mène des recherches fondamentales et appliquées dans le domaine de la communication parlée. Nos travaux visent notamment : 

    • à capturer, analyser et modéliser les différents signaux verbaux et co-verbaux mis en jeu dans une situation d’interaction communicationnelle entre deux humains, ou entre un humain et un robot humanoïde.
    • à mieux comprendre la production de la parole, en modélisant notamment les relations entre l’activité articulatoire (c’est-à-dire le mouvement de la langue, des lèvres, etc.), et le signal acoustique.
    • à mieux comprendre les mécanismes de communication chez les personnes malentendantes
    • à concevoir des outils technologiques pour la rééducation orthophonique, la suppléance vocale, le divertissement et les robots humanoïdes

 

Les 3 axes de recherches de l’équipe CRISSP sont :

    • Robotique cognitive : développer les capacités socio-communicatives de robots humanoïdes communicants.
    • Systèmes interactifs : développer des systèmes réactifs de communication « augmentée » exploitant des caractéristiques multimodales de la parole (son, vision, gestes).
    • Traitement de la parole : étude de l’appareil de production de la parole (modélisation articulatoire-acoustique), synthèse vocale et conversion de voix.

Domaines d’expertises de l’équipe

    • Traitement du signal audio (analyse, compression, filtrage, débruitage par séparation de sources, etc.) et en particulier le signal de parole (analyse, transformation, morphing, reconnaissance automatique, synthèse à partir du texte, synthèse articulatoire, inversion acoustico-articulatoire)
    • Modélisation par apprentissage statistique (machine learning
    • Acquisition de données articulatoires (electrographie electromagnétique (EMA), imagerie ultrasonore, IRM, video rapide, EMG).
    • Conception de protocoles expérimentaux nécessitant l’acquisition simultanée de différents signaux verbaux et co-verbaux sur un ou plusieurs humains en situation d’interaction (motion capture, eye-tracking, etc.)

 

Les membres

(photo prise le 18/12/2015)

 

Contact : Gérard Bailly et Thomas Hueber (e-mail : prenom.nom@gipsa-lab.fr)



A la une
ParutionBiosignal-Based Spoken Communication

Special Issue edited by Tanja Schultz ; Thomas Hueber ; Dean J. Krusienski ; Jonathan S. Brumberg
Editeur : IEEE/ACM Transactions on Audio, Speech, and Language Processing, volume 25, n° 12, December 2017

Lire la suite



Dernières publications de l'équipe

Audio-visual synchronization in reading while listening to texts: Effects on visual behavior and verbal learning

Emilie Gerbier, Gérard Bailly, Marie-Line Bosse. Audio-visual synchronization in reading while listening to texts: Effects on visual behavior and verbal learning. Computer Speech and Language, Elsevier, 2018, 47 (january), pp.79-92. 〈10.1016/j.csl.2017.07.003〉. 〈hal-01575227〉

Pattern Recognition Letters Learning Off-line vs. On-line Models of Interactive Multimodal Behaviors with Recurrent Neural Networks

Duc Canh Nguyen, Gérard Bailly, Frédéric Elisei. Pattern Recognition Letters Learning Off-line vs. On-line Models of Interactive Multimodal Behaviors with Recurrent Neural Networks. Pattern Recognition Letters, Elsevier, 2017, 100, pp.29 - 36. 〈10.1016/j.patrec.2017.09.033〉. 〈hal-01609535〉

Biosignal-Based Spoken Communication: A Survey

Tanja Schultz, Thomas Hueber, Michael Wand, Dean J. Krusienski, Christian Herff, et al.. Biosignal-Based Spoken Communication: A Survey. IEEE/ACM Transactions on Audio, Speech and Language Processing, Institute of Electrical and Electronics Engineers, 2017, 25 (12), pp.2257 - 2271. 〈10.1109/TASLP.2017.2752365〉. 〈hal-01652757〉


Voir toutes les publications de l'équipe dans HAL
GIPSA-lab, 11 rue des Mathématiques, Grenoble Campus BP46, F-38402 SAINT MARTIN D'HERES CEDEX - 33 (0)4 76 82 71 31