Th. 3e cycle--Trait. inf.--Lille 1, 1977. N°: 664.

.

Le fait que toute activité linguistique et toute interactivité soient relatives à un jeu de langage / un genre / un type de conversation a été reconnu depuis longtemps par divers spécialistes. Néanmoins, jusqu'à présent, aucune théorie systématique n'a pas été construite qui peut fournir en une manière formelle la composition et la gamme des types de conversation actuels et possibles. Dans cette thèse, nous adoptons une approche topologique pour classifier les conversations et développons une théorie formelle des types conversationnels dans le cadre de Type Theory with Records. Énoncés non phrastiques (ENP) - des énoncés fragmentaires qui sont des phrases sans prédicat mais qui expriment néanmoins un sens complet dans un contexte donné - sont un phénomène caractéristique de la conversation. Dans cette thèse, nous étudions les ENP dans un corpus chinois et examinons la distribution des ENP dans les genres parlés du Corpus National britannique (BNC). Cette thèse aborde le sujet de l'élaboration d'une théorie des types conversationnels qui peut expliquer la résolution des énoncés non phrastiques à travers des différents types conversationnels. En revanche, nous testerons l’hypothèse que la variation entre des distributions des énoncés non phrastiques peut servir à structurer l’espace des types conversationnels. / That all linguistic activity and interactivity is relative to a domain/language-game /genre/conversational type has long been acknowledged by various scholars. Nonetheless, hitherto there has been no systematic theory that tries to propose a formal account regarding the make-up and range of actual and possible conversational types. In this thesis, we take a topological approach to classifying conversations and develop a formal theory of conversational types in the framework of Type Theory with Records (TTR). Non-sentential utterances (NSUs)—fragmentary utterances which are incomplete sentences but nevertheless convey a complete sentential meaning in the given context—are a characteristic phenomenon of conversation. In this thesis, we study NSUs in a Chinese corpus and investigate the distribution of NSUs across the spoken genres of the British National Corpus (BNC).This thesis tackles the topic of developing a theory of conversational types that can be used to explicate the resolution of NSUs across different conversational types. Conversely, we investigate whether the variation in the distribution of NSUs can serve as a means of structuring the space of conversational types.

L'objectif de cette thèse est de représenter les émotions spontanées et les signes multimodaux associés pour contribuer à la conception des futurs systèmes affectifs interactifs. Les prototypes actuels sont généralement limités à la détection et à la génération de quelques émotions simples et se fondent sur des données audio ou vidéo jouées par des acteurs et récoltées en laboratoire. Afin de pouvoir modéliser les relations complexes entre les émotions spontanées et leurs expressions dans différentes modalités, une approche exploratoire est nécessaire. L'approche exploratoire que nous avons choisie dans cette thèse pour l'étude de ces émotions spontanées consiste à collecter et annoter un corpus vidéo d'interviews télévisées. Ce type de corpus comporte des émotions plus complexes que les 6 émotions de base (colère, peur, joie, tristesse, surprise, dégoût). On observe en effet dans les comportements émotionnels spontanés des superpositions, des masquages, des conflits entre émotions positives et négatives. Nous rapportons plusieurs expérimentations ayant permis la définition de plusieurs niveaux de représentation des émotions et des paramètres comportementaux multimodaux apportant des informations pertinentes pour la perception de ces émotions complexes spontanées. En perspective, les outils développés durant cette thèse (schémas d'annotation, programmes de mesures, protocoles d'annotation) pourront être utilisés ultérieurement pour concevoir des modèles utilisables par des systèmes interactifs affectifs capables de détecter/synthétiser des expressions multimodales d'émotions spontanées.

Reproduction de : Thèse de doctorat : Informatique : Paris 8 : 2007. / Titre provenant de l'écran-titre. Bibliogr. p. 205-218. Glossaire.

Les travaux présentés dans ce manuscrit portent sur l'utilisation des humains virtuels et, plus globalement, des technologies du jeu vidéo pour améliorer le soin aux personnes âgées atteintes de troubles cognitifs. Nos travaux s'articulent autour de deux cas d'utilisation des humains virtuels : comme non-soi et comme soi. Plus spécifiquement, nous avons conçu, implémenté et évalué un agent conversationnel animé, appelé LOUISE (LOvely User Interface for Servicing Elders), ayant pour but de servir d'interface utilisateur accessible dans les dipositifs de compensation cognitives à destination des personnes âgées attenteintes de troubles cognitifs, et un dispositif de thérapie psychologique par la réalité virtuelle pour traiter les conséquences des chutes, appelé Promenade virtuelle. Ces deux projets ont été menés suivant des principes de conception participative en living lab, implicant plusieurs parties prenantes dans le processus de conception (patients, aidants et professionnels de santé). / The work presented in this manuscript investigates the use of virtual huamans, and, more broadly, of video game technologies to improve the care of older adults with cognitive impairment. Our work revolved around two use cases of virtual humans: as non-self and as self. More specifically, we have designed, implemented and evaluated an embodied conversational agent, called LOUISE (LOvely User Interface for Servicing Elders), meant to serve as an accessible user interface in cognitive compensation systems for older adults with cognitive impairment, and a system for virtual reality-based psychological therapy addressing the consequences of falls, called Virtual Promenade. These two projects have been conducted according to the principles of living lab participatory design, involving several stakeholders in the design process (patients, caregivers and healthcare professionals).

Dans le contexte de la génération synthétique et le décodage d'informations linguistiques, non seulement le composant auditif mais aussi le composant visuel de la parole transmettent de l'information précieuse. Nous étudions le regard en tant qu´élément crucial pour enrichir la parole et fournir des informations supplémentaires. Le regard est un geste déictique très important, ainsi il influence de manières variées l'organisation du dialogue et de l'interaction sociale. Dans une première expérience nous étudions comment le regard d'une tête parlante peut être employé comme geste déictique dans un jeu de recherche et sélection sur un écran d'ordinateur. Nous avons trouvé que ces gestes sont capables de réduire le temps de réaction ainsi que la charge cognitive. Cet effet est accentué quand le geste est de caractère multimodal, utilisant la parole de manière adaptée. Dans une deuxième expérience nous avons étudié le rapport entre le regard d'un sujet cible et les différents éléments d'une interaction dialogique. Nous avons défini différents segments dans l'échange d'information dialogique et avons trouvé qu´ils sont liés aux variations du comportement du regard mesuré. Basé sur ces résultats nous proposons un modèle pour le contrôle du regard d'un agent conversationnel animé dans l'interaction face-à-face.

Les travaux effectués dans cette thèse explorent la problématique de la synthèse de modèles d'assistance pour un système d'assistance à l'utilisateur en langue naturelle. Cette problématique est complexe car les modèles utilisés doivent unifier deux visions différentes et parfois contradictoires d'un même objet : l'application en cours d'exécution.L'hypothèse défendue dans ces travaux est que le recours à une représentation, guidée par des traits perceptuels pour organiser les informations, permet de résoudre (en partie) ce problème d'unification. Nous explorons cette hypothèse sur la problématique du regroupement perceptuel de composants d'interface. Pour obtenir cette représentation, nous avons implémenté un algorithme de regroupement perceptuel issu de la théorie de la gestalt. Ces travaux ont permis le développement d'une famille de composants dialogiques utilisables comme éléments de modélisation. Cette famille de composants (Daft-swing), s'insère dans une architecture de traitement de requêtes (Daft). La synthèse de modèles est ensuite traitée dans deux études de cas différentes : la première met en oeuvre l'algorithme de regroupement perceptuel dans le cadre de la synthèse de modèles a partir d'une application web. La deuxième se focalise sur la synthèse de modèles à partir des actions d'un utilisateur. Ces deux outils produisent des modèles utilisant des composants de Daft-Swing directement utilisables par l'architecture Daft et son agent assistant.

Avec le nombre croissant d'utilisateurs novices des applications informatiques, le besoin d'une aide efficace est devenu critique. Afin de répondre à ce besoins, nous suggérons d'utiliser un Agent Conversationnel Assistant (ACA), c'est-à-dire une interface permettant l'utilisation de la langue naturelle (en effet celle-ci est utilisée spontanément dès qu'un problème surgit) ainsi qu'une présence rassurante pour les utilisateurs.Une étude préliminaire détaille la constitution (en combinant la collecte et l'utilisation de thesaurus) d'un corpus de requêtes dont nous justifions le besoin. Ce corpus de 11626 requêtes est comparé avec d'autres corpus existants et nous montrons qu'il couvre le domaine étudié d'aide et que de plus, il contient des requêtes portant d'une part sur le contrôle de l'application et d'autre part des phrases de 'clavardage'. Ce corpus fournit une base saine pour la conception d'un analyseur syntactico-sémantique de requêtes en langage naturel, utilisant un jeu de classes (keys) sémantiques, un jeu de règles d'analyse et un jeu de règles de transformation. En entrée, les requêtes sont exprimées dans un langage formel (DAFT) pour lequel nous proposons une syntaxe et une sémantique. L'analyseur est alors évalué en comparant une annotation manuelle avec les requêtes produites automatiquement et nous étudions l'usage de techniques d'apprentissage supervisé afin d'identifier les classes d'activités conversationnelles. La méthodologie employée est validée via l'intégration d'un ACA dans une application Web existante , dédiée au prototypage collectif de la musique sur Internet. Enfin, nous décrivons l'architecture requise pour implémenter un agent rationnel qui a pour rôle de définir les réactions aux requêtes formelles des usagers, exprimées en DAFT ainsi que le modèle de l'application assistée, mettant ainsi en lumière le besoin d'un modèle cognitif.

Thèse de doctorat : Informatique : Nancy 1 : 2007. / Titre provenant de l'écran-titre. Bibliogr.