Logiciels

Ultraspeech-acquisition

Ultraspeech-acquisition est un logiciel permettant l'acquisition simultanée et synchrone d'images ultrasonores, d'images vidéo, de plusieurs canaux audio et de données inertielles en provenance d'accéléromètres. Ultraspeech-acquisition est compatible avec les échographes ultra-portables Terason T3000 et Telemed (Echoblaster et MicroUS), les caméras industrielles de la société Imaging Source, et les cartes sons compatibles ASIO. Téléchargement gratuit sur www.ultraspeech.com !

Un exemple d'une séquence acquise par ce système est disponible dans la vidéo ci-dessous :

Ultraspeech-player

Ultraspeech-player est un logiciel permettant de visualiser simultanément, pour différents phonèmes ou logatomes d'une langue, les mouvements de la langue et des lèvres, acquis sur un locuteur de référence par imagerie ultrasonore et vidéo, tout en écoutant le signal sonore de la parole vocalisée. Ultraspeech-player est destiné principalement à la rééducation orthophonique. L'objectif est d'améliorer certains processus de rééducation en permettant à un patient d'accroitre la conscience qu'il a de ses propres mouvements articulatoires, et en tirant parti du couplage entre perception du son, visualisation du geste et sensations proprioceptives. Ultraspeech-player peut également être utilisé pour l'enseignement de la phonétique articulatoire et des langues étrangères. Téléchargement gratuit sur www.ultraspeech.com/player !

Codes sources / toolbox

Cascaded-GMR: toolbox Matlab pour l'apprentissage et l'utilisation des modèles IC-GMR (Hueber et al., IEEE/ACM TASLP 2015), et J-GMR (Girin et al., IEEE/ACM TASLP 2016).

DeepPredSpeech: script Python pour l'apprentissage et l'utilisation des modèles de codage prédictif de la parole auditive et audiovisuelle proposés dans Hueber et al. (2019), Neural Computation.

Grenoble Images Parole Signal Automatique laboratoire

UMR 5216 CNRS - Grenoble INP - Université Joseph Fourier - Université Stendhal