Titre de la thèse : Deixis prosodique multisensorielle : production et perception audiovisuelle de la focalisation contrastive en francais [voir le manuscrit]

Thématiques de recherche : prosodie multimodale (études comportementales et neuroimagerie), coordination geste/parole dans la communication parlée, perception audiovisuelle de la parole Lombard, caractérisation physiologique et cérébrale des hallucinations auditives verbales chez les patients schizophrènes, études IRMf et EEG de la réorganisation fonctionnelle de la parole chez des patients épileptiques avant et après intervention chirurgicale.
Collaborations au sein de GIPSA-lab : Hélène Lœvenbruck, Jean-Luc Schwartz, Anne Vilain, Coriandre Vilain

Thème de recherche : comparaisons inter-linguistiques en continuité avec ma recherche doctorale et exploration par IRMf de la spécificité de la perception de la focalisation prosodique par rapport à la focalisation syntaxique.

Thème de recherche : étude de la bimodalité audiovisuelle de la focalisation contrastive prosodique en français en production et en perception.

Thème de recherche : collaboration scientifique avec le Dr. Harold Hill de ATR : acquisition de données de mouvements faciaux par suivi de diodes Infra-Rouge, avec un Optotrak (méthode complémentaire de celle de suivi automatique du contour des lèvres utilisée à l’ICP) pour des locuteurs français et japonais.

Thème de recherche : présentation de mon travail de recherche, mise en place d’une collaboration scientifique avec le Dr. Harold Hill du département Human Information Science (HIS) de ATR et acquisition préliminaire de données de mouvements faciaux par Optotrak sur un locuteur français.

Thème de recherche : reconnaissance automatique robuste de la parole : mise en place d’algorithmes permettant, à partir de l’estimation d’un score de confiance pour la reconnaissance automatique, de corriger les erreurs de reconnaissance en combinant des informations issues des modèles de langage, des informations temporelles et des informations fournies par des listes de probabilités. La technique mise en place a permis d’augmenter le taux de reconnaissance de la parole en milieu bruité.

Dépôt d’un brevet japonais : no. 2002-264718 (10 septembre 2002) Titre : programme informatique pour la reconnaissance automatique de la parole et la correction automatique des erreurs de reconnaissance.

Matières enseignées : Traitement du signal (cours, TD, TP), Sciences cognitives (cours), Théorie de l'information (TD), Traitement de l'image (TD), Transformées intégrales (TD), Asservissements continus (TD).

Matières enseignées : traitement du signal (TP) et théorie de l’information (TD).

Matière enseignée : éveil aux sciences sur le thème des 5 sens.
Public : adolescents phobiques scolaires de la 6ième à la Terminale.
Le but du projet est d'aider ces élèves à se réinserer dans le cursus scolaire « traditionnel ».

Prix de thèse de l’Association Francophone pour la Communication Parlée (AFCP) 2005

Sujet : Caractérisation de l’interaction geste/parole dans la production et la perception de la parole.

Sujet : Caractérisation phénoménologique, physiologique et cérébrale des HAV chez les schizophrènes.

Sujet : Etudes des corrélats cérébraux lors d’une tâche de génération de pensée chez des patients schizophrènes anglophones.

Sujet : Etude de l’influence de la production de gestes bracchio-manuels sur la production et la perception de la parole.

Sujet : Signatures orales des hallucinations auditives verbales chez les schizophrènes : Electromyographie de surface oro-faciale et électroglottographie.

Sujet : Etude comparative de la perception audiovisuelle de la prosodie en français et en japonais.

Sujet : Time-varying information and facial movement - Natural exaggeration of differences in duration.

Sujet : Elaboration d’un corpus de parole audiovisuelle pour tester l’effet McGurk.