La LPC ou Cued Speech est un augment manuel qui permet au sourd de désambiguïser l'information phonologique visible sur le visage. L'efficacité de ce système pour l'acquisition de la phonologie de la langue est bien établie. Mais la production du code LPC n'avait jamais été étudiée, et nous l'avons fait par une technique de suivi des mouvements labiaux et manuels de quatre codeuses professionnelles. Notre résultat comportemental majeur est que le geste de la main - contre toute attente - précède le geste des lèvres. Cette anticipation donne un rôle inattendu à la parole visible: celui de venir désambiguïser le geste manuel, conçu au départ pour désambiguïser la parole... Notre hypothèse est que le système de Cornett a été recodé en termes neuralement compatibles pourle contrôle des gestes des voyelles et des consonnes dans la LPC et la parole. Ainsi le contrôle des contavts vocaliques manuels va se trouver en phase avec celui des contacts consonantiques visibles. Ce phasage est assez précis pour que, quelles que soient les variations de la durée de l aproduction de la syllabe CV, l'aboutissement de la détente (stroke) du système main-bras se produise dans la phase de tenue de l'attaque consonantique. L'icorporation de la main et de la face dans un espace de contrôle neural commun peut être ainsi pleinement réalisée dans la LPC.

La Langue Française Parlée Complétée (LPC) héritée du Cued Speech (CS) a été conçue pour compléter la lecture labiale par nature ambigüe et ainsi améliorer la perception de la parole par les sourds profonds. Dans ce système, le locuteur pointe des positions précises sur le côté de son visage ou à la base du cou en présentant de dos des formes de main bien définies. La main et les lèvres portent chacune une partie complémentaire de l'information phonétique. Cette thèse présente tout d'abord une modélisation du flux manuel pour le codage automatique des positions de la main et de la configuration. Puis les travaux sont centrés sur le flux labial en discutant la classification des voyelles et des consonnes du Français. Le flux labial est composé des variations temporelles de paramètres caractéristiques issus du contour interne et externe des lèvres. Dans le cas des voyelles la méthode de classification utilise la modélisation gaussienne et les résultats montrent une performance moyenne de 89 % en fonction de la position de la main LPC. Le contexte vocalique est pris en compte dans le cas des consonnes par une modélisation HMM de la transition labiale de la consonne vers la voyelle avec un taux d'identification de 80 % en termes de visèmes CV. Un modèle de fusion « Maître-Esclave » piloté par le flux manuel est présenté et discuté dans le cadre de la reconnaissance des voyelles et des consonnes produites en contexte LPC. Le modèle de fusion prend en compte les contraintes temporelles de la production et la perception du LPC, ce qui constitue aussi une première contribution à la modélisation du système LPC du point de vue perceptif.

Cette thèse traite de la mise en œuvre d'un système de synthèse 3D de parole audiovisuelle capable, a partir d'une simple chaîne phonétique, de générer un signal audio synthétique, les mouvements du visage correspondant ainsi que les mouvements de la main reproduisant les gestes de la Langue française Parlée Complétée (LPC). Nous avons enregistré les mouvements faciaux et manuels d'une codeuse LPC par une technique de motion capture, ainsi que le signal audio correspondant, lors de la production d'un corpus de 238 phrases couvrant l'ensemble des diphones du français. Après traitements et analyses des données, nous avons implémenté un système de synthèse par concaténation d'unités en deux étapes capable de générer de la parole codée. Enfin, nous avons évalué notre système tant au niveau de l'intelligibilité segmentale qu'au niveau de la compréhension. Les résultats sont prometteurs et montrent clairement un apport d'information du code de synthèse.

Le champ socio-professionnel circonscrit par la prise en compte éducative et sociale des surdités sévères et profondes congénitales est structuré par un clivage entre les courants gestualistes et oralistes apparu à la fin du XVIIIè siècle. Depuis la fin des années mille neuf-cent soixante-dix, sous les impulsions de la militance pour la « cause sourde » d'une part et des progrès technico-médicaux de l'autre, ce clivage s'est trouvé refondé dans celui distinguant une conception du sujet sourd, héritant du structuralisme en linguistique et en psychanalyse, d'une approche de l'individu déficient auditif marqué du positivisme des modèles biologiques appliqués à l'humain.Si l’indigence de la prise en compte de la complexité de la rationalité humaine par ce second paradigme fait l'objet de critiques tout aussi sévères qu'argumentées de la part du premier, la passion pour la langue des signes qui infiltre celui-ci l'inscrit aussi, par là même, dans la tendance sociale repérable comme celle d'un effacement de la spécificité de l'enfant.Bien au-delà d'ailleurs du contexte du handicap, on peut identifier que la langue des signes produit dans notre contemporanéité des effets de fascination amplement redevables aux échos qu'elle trouve dans la négativité – au sens de Jean Gagnepain – constitutive de la condition de l'Homme.Dans l'investissement de la langue des signes, ordonné par la militance pour la « cause sourde » et l'orientation se présentant comme oeuvrant à un bilinguisme, la question de l'imprégnation de la langue audio-orale communautaire et de son outillage par l’écrit figure enfin un point d’achoppement dont se démarquent les approches oralistes notamment renouvelées par la Langue française Parlée Complétée (LPC). / The socio-professional area is delimited by the social and educative ways of regarding the severe congenital deafnesses. It is structured by the split between the oralism and gestualism branches which appeared at the end of XVIIIth century. Since the end of the seventies, driven by parental and cultural militancies as well as technical and medical progress, this division has been refounded in a new one which sets apart two ways of seeing the deaf person. One derives from structuralism in linguistic and psychoanalyse and the other one from positivism of biological models applied to Human.The paucity of the second paradigm regarding the human rationality complexity is the target of serious as well as documented criticisms by the first one. However, the passion for the sign language which comes in the latter one puts it also, by the fact, in the social trend which erases the child specificity. Besides, far beyond the handicap context, the fascination for the sign language observed in our contemporaneity is fully indebted to echoes found in the human constitutive negativity – in the Jean Gagnepain's meaning.Finally the issues of impregnation by audio-oral community language and of its equipment by writing are sticking points in the sign language approach, ordered by campaigners for the deaf cause and considered as working for bilingualism. Conversely, oralism, especially when renewed by the Cued Speech adapted to French, gets free from these pitfalls.

Le LPC est un complément à la lecture labiale qui facilite la communication des malentendants. Sur le principe, il s'agit d'effectuer des gestes avec une main placée à côté du visage pour désambigüiser le mouvement des lèvres, qui pris isolément est insuffisant à la compréhension parfaite du message. Le projet RNTS TELMA a pour objectif de mettre en place un terminal téléphonique permettant la communication des malentendants en s'appuyant sur le LPC. Parmi les nombreuses fonctionnalités que cela implique, il est nécessaire de pouvoir reconnaître le geste manuel du LPC et de lui associer un sens. L'objet de ce travail est la segmentation vidéo, l'analyse et la reconnaissance des gestes de codeur LPC en situation de communication. Cela fait appel à des techniques de segmentation d'images, de classification, d'interprétation de geste, et de fusion de données. Afin de résoudre ce problème de reconnaissance de gestes, nous avons proposé plusieurs algorithmes originaux, parmi lesquels (1) un algorithme basé sur la persistance rétinienne permettant la catégorisation des images de geste cible et des images de geste de transition, (2) une amélioration des méthodes de multi-classification par SVM ou par classifieurs unaires via la théorie de l'évidence, assortie d'une méthode de conversion des probabilités subjectives en fonction de croyance, et (3) une méthode de décision partielle basée sur la généralisation de la Transformée Pignistique, afin d'autoriser les incertitudes dans l'interprétation de gestes ambigus.