Ultraspeech-acquisition
Ultraspeech-acquisition
est un logiciel permettant l‘acquisition
simultanée et synchrone d'images ultrasonores (jusqu'à 70 fps en
640x480 pixels), d'images vidéo (jusqu'à 60 fps en 640x480 pixels
NB), de plusieurs canaux audio et de données inertiels en
provenance d'accéléromètres. Ultraspeech-acquisition
est compatible avec les échographes ultra-portables Terason
T3000 et Telemed
(Echoblaster et MicroUS), les caméras industrielles de la
société Imaging Source,
et les cartes sons compatibles ASIO. Téléchargement gratuit sur www.ultraspeech.com
!
Un exemple d'une séquence acquise par ce système est disponible dans la vidéo ci-dessous :
Ultraspeech-player
Ultraspeech-player
est un logiciel permettant de visualiser simultanément, pour
différents phonèmes ou logatomes d'une langue, les mouvements de
la langue et des lèvres, acquis sur une locuteur de référence par
imagerie ultrasonore (échographie) et vidéo, tout en écoutant le
signal sonore de la parole vocalisée. Ultraspeech-player est
destiné principalement à la rééducation orthophonique. L’objectif
est d’améliorer certains processus de rééducation en permettant à
un patient d’accroitre la conscience qu’il a de ses propres
mouvements articulatoires (ex : ma langue recule quand je prononce
le son « ou », vient toucher le palais quand je réalise la
consonne « k », etc.), et en tirant parti du couplage se réalisant
alors entre perception du son, visualisation du geste, et
sensations proprioceptives. Ultraspeech-player peut également être
utilisé pour l'enseignement de la phonétique articulatoire, et
l'enseignement des langues étrangères (aide à la prononciation).
Téléchargement gratuit sur www.ultraspeech.com/player
!
Codes sources / toolbox
Cascaded-GMR:
Toolbox Matlab pour l'apprentissage et l'utilisation des modèles
IC-GMR (Hueber et al., IEEE/ACM TASLP 2015), (Girin et al., 2016
IEEE/ACM TASLP)
DeepPredSpeech:
Script Python pour l'apprentissage et l'utilisation des modèles de
codage prédictif de la parole auditive et audiovisuelle (de type
DNN/CNN) proposés dans (Hueber et al., 2019, Neural Computation).
Grenoble Images Parole Signal Automatique laboratoire
UMR 5216 CNRS - Grenoble INP - Université Joseph Fourier - Université Stendhal