Mon domaine de recherche est l'Interaction Homme-Machine. Mes travaux dans ce domaine s'organisent autour de deux axes. <br /><br />Le premier axe concerne la conception de systèmes interactifs pour la coordination, la communication et la collaboration entre individus. Je m'intéresse en particulier à la manière dont des moyens vidéo peuvent être utilisés pour permettre des échanges plus subtils (i.e. légers, nuancés, implicites) et plus informels (i.e. spontanés, opportuns) que ceux permis par les systèmes actuels.<br /><br />Le deuxième axe concerne la conception de nouvelles métaphores et techniques destinées à enrichir et simplifier l'interaction au quotidien avec les systèmes informatiques. Je m'intéresse plus particulièrement aux moyens de faire évoluer la métaphore du bureau sous-jacente à la gestion des données et des applications dans la plupart des systèmes actuels.<br /><br />Ce document présente les problématiques liées à ces deux axes de recherche, les travaux s'y rapportant auxquels j'ai participé depuis septembre 2001 et quelques perspectives ouvertes par ces travaux.

Mémoire numérisé par la Division de la gestion de documents et des archives de l'Université de Montréal.

L'objet de cette thèse est l'étude de l'intégration de la vidéo dans les systèmes informatiques interactifs. Cette étude se place dans le contexte de la communication médiatisée, où l'informatique permet à la fois de numériser, transmettre, traiter et afficher des flux vidéo numériques mais également de contrôler des moyens vidéo analogiques. Notre démarche se veut à la fois scientifique et technologique, centrée sur les usages : nous voulons comprendre les mécanismes à mettre en oeuvre pour permettre une grande diversité d'usage de la vidéo, de la perception périphérique à la collaboration formelle, et nous voulons en même temps fournir les outils logiciels qui permettront de développer plus encore ces usages. La thèse est organisée en trois parties. La première partie présente différents systèmes commerciaux et travaux de recherche qui illustrent les usages actuels de la vidéo dans les systèmes interactifs. Nous décrivons plus particulièrement les environnements de type Media Space, que nous caractérisons par trois propriétés fondamentales : intégrabilité, flexibilité et intimité. La seconde partie est consacrée à l'utilisation des langages et protocoles du World Wide Web comme infrastructure logicielle pour la mise en oeuvre de nouveaux mediaspaces. Nous montrons le bien-fondé de cette approche en nous basant sur les propriétés identifiées dans la première partie, nous présentons Mediascape et videoServer, deux prototypes qui la mettent en application, puis nous montrons comment elle peut être étendue par l'ajout de clients et de protocoles spécifiques. Ces extensions sont à l'origine de videoSpace, une boîte à outils logicielle que nous présentons dans la troisième partie. Nous décrivons son interface de programmation ainsi que les outils de base qu'elle offre aux utilisateurs, puis nous concluons par trois ensembles de prototypes qui illustrent ses possibilités actuelles et préfigurent les nouveaux usages de la vidéo qu'elle devrait faciliter à l'avenir.

Mémoire numérisé par la Division de la gestion de documents et des archives de l'Université de Montréal

L’abandon en formation ouverte et à distance (FOAD) constitue un enjeu important tant pour les apprenants que pour les organismes de formation, que ce soit pour des raisons économiques, sociales, ou encore d’image (de soi ou publique). Les besoins des apprenants en termes d’accompagnement sont tant techniques, cognitifs et métacognitifs, qu’affectifs. C’est cette dernière notion, la dimension affective, qui nous intéressera particulièrement dans cette thèse pour comprendre l’abandon. Afin de tenir compte de la dimension sociale de l’individu et des relations qu’il entretient avec les enseignants, ses pairs ou ses proches, il sera question de dimension socio-affective. Nous mobilisons, pour mieux définir cette dimension et comprendre les enjeux de la communication médiatisée et de la distance en formation (en tant qu’objet social et technique), des auteurs issus de différentes disciplines des sciences humaines : des chercheurs en sciences de l’information et de la communication, des psychologues et des chercheurs en sciences de l’éducation. Nous proposons de caractériser la dimension socio-affective, pensée comme un système, par un modèle intégratif des émotions et sentiments proposés par l’ensemble de ces chercheurs. Cette dimension sera étudiée en regard de la notion de persévérance, inverse d’abandon. Nous nous demandons alors quels sont les facteurs socio-affectifs expliquant l’abandon en formation à distance, ou inversement la persévérance ? Sont notamment questionnés l’importance des interactions dans (avec les enseignants et autres apprenants) et en dehors (avec l’entourage proche) du dispositif de formation, et les facteurs individuels des apprenants (e.g. socio-démographiques). Pour répondre à ces questions, une enquête en deux parties (en début –attentes– et en fin de formation –vécu) et des entretiens semi-directifs ont été réalisés. Les premiers résultats rendent compte d’écarts entre attentes initiales et vécu de la formation, plus ou moins importants selon les apprenants. L’abandon apparaît explicable en analysant la dimension socio-affective, notamment dans les relations avec les acteurs du dispositif. Alors que certains subissent leur isolement du fait d’un manque de relation avec les enseignants, d’autres compensent en établissant une relation avec leurs pairs. Enfin, les proches occupent une place essentielle pour les apprenants qui vivent en famille et qui attendent leur soutien. / The drop out in open and distance learning (ODL) is an important issue both for the learners and training organizations, whether for economic, social or image (self-image or brand image). The accompanying needs of learners are both technical, cognitive and meta-cognitive, and affective. The latter particularly interest us in this thesis to understand the drop out. To take account of the social dimension of the person and his relationship with teachers, peers or family, we will discuss socio-emotional dimension. To better define this dimension and understand the issues of mediated communication and the distance in training (as a social and technical object), we mobilize some authors from different disciplines of the humanities: Researchers in science of information and communication , psychologists and researchers in science education. We propose to characterize the socio-emotional dimension, thought of as a system, by an integrative model of emotions and sentiments offered by all of these researchers. This aspect will be studied in relation to the notion of persistence, which is the opposite of drop out. We wonder what are the socio-emotional factors behind the drop out in distance learning, or conversely perseverance? The importance of interactions within (with teachers and other learners) and outside the training device (with family) and individual factors of learners (eg sociodemographic) are questioned. To answer these questions, an investigation into two parts (in beginning - expectations - and in end of training - experience) and semi-directive interviews were conducted. The first results reflect the differences between initial expectations and experiences of training, more or less important according learners. The drop out appears explainable by analyzing the socio-emotional dimension, especially in relations with the actors of the device. While some students suffer isolation due to a lack of relationship with teachers, others compensate by establishing a relationship with their peers. Finally, relatives occupy an essential place for learners who live in families and are waiting their support.

Cette recherche interroge la production d’un savoir sur la communication qui résulte de la réflexivité communicationnelle induite par les échanges en ligne établis au sein d’un média informatisé. L’objectif est de comprendre comment se construit ce savoir en analysant le triptyque sujet/dispositif/autres usagers. Par la pratique de dispositifs comme l’arène de bataille en ligne multijoueur League of Legends ou du site de discussion féminin en ligne Confidentielles.com, les sujets s’engagent dans un « régime d’ajustement » visant à comprendre et à juger les situations de communication qui se présentent à eux. Le régime d’ajustement apparaît comme dynamique, inconscient, évolutif et se déroule simultanément à la pratique, par le biais d’opérations réflexives. Deux niveaux de réflexivité sont étudiés qui équivalent à des périodes de l’ajustement : le premier débute à la confrontation avec le dispositif, où les sujets apprennent à décrypter ce qui se joue dans la situation, définissent le comportement à adopter, et appréhendent l’importance du rapport aux autres. Le second s’effectue tout au long de la pratique pour gérer efficacement les différentes interactions et vivre au mieux l’expérience. Ces processus réflexifs induisent la production de savoirs ordinaires et s’accompagnent de l’adoption d’une « posture d’ethnologue-amateur » : les sujets développent une certaine sensibilité à décrypter les processus et à comprendre les situations de communication grâce aux « voyages » effectués entre le monde de la communication médiatisée et celui de la communication en face à face. / The research studies the process of making of a knowledge on the communication resulting from reflective communication in online interchanges within a computerized media. It aims at understanding how this knowledge is acquired by analyzing the following triptych : users/device/other users. When using device like a multiplayer online battle arena League of Legends or female online discussion website Confidentielles.com, the users get involved in a psychosocial « adjustment system » to understand and assess the situations of communication they are facing. Thus, since it is developed during the practice, the « adjustment system » appears to be dynamic, mechanical and progressive thanks to reflective process. Two levels of reflexivity corresponding to the stages of this adjustment will be studied. The first level starts when the user facing the device has to work out and estimate the situation, decide on the strategy to adopt and grasp the importance of relations with others. The second level takes place all through the practice to manage efficiently the various interactivities and be as happy as possible in the given situation. On the one hand, these reflective process infer the production of ordinary knowledge; in the other hand the user has to adopt the « amateur-ethnologist position » when developing skills to understand the process and the situations of communication thanks to the « trips » between mediated communication and face to face communication.

This research focuses on multimodal pedagogical communication in synthetic (virtual) worlds. The study investigates the interplay between verbal and nonverbal interaction which supports verbal participation and production in a foreign language. This is analysed from a socio-semiotic perspective of multimodality within the context of a course held in the synthetic world Second Life, which adopted a Content and Language Integrated Learning (CLIL) approach. The course, entitled 'Building Fragile Spaces', formed part of the European project ARCHI21. It was designed for higher education students of Architecture whose foreign language was either French or English. The interplay between verbal and nonverbal interaction is examined from three different angles. Firstly, considering the opportunities synthetic worlds offer for the co-creation of the environment through building activities and for collaboration, the role played by the nonverbal mode during a collaborative building activity is investigated. The study questions whether the use of the nonverbal mode impacts on the participation of students in the verbal mode, and whether any interplay exists between these two modes that influences verbal production. Secondly, use of the nonverbal mode by students in inworld identity construction is addressed and considered with reference to their verbal interaction, and participation, in the foreign language. Thirdly, the research concentrates upon interplay between the audio and textchat modalities in the verbal mode. More specifically, the focus is on whether the textchat plays a role during interaction, considering it is in competition not only with the audio modality but also with several nonverbal modalities; and on whether the textchat modality can serve for feedback provision on language form. This thesis seeks to contribute to the methodological considerations to allow research to move beyond speculative and anecdotal examples of multimodal pedagogical communication in synthetic worlds. A typology of nonverbal and verbal modalities is proposed, and then drawn upon, to extend a previous methodology suggested for multimodal transcription to interactions in synthetic worlds. Considering, within the fields of Social Sciences and Language Sciences, the more general research problem to render research data used for analyses visible and publically accessible, the study adopts a LEarning and TEaching Corpus (LETEC) methodological approach. Constituting a structured corpus allows for contextual analyses of the data collected during the 'Building Fragile Spaces' course. This research offers insights into how verbal participation increases with reference to the proxemic organisation of students, the customization of students' avatar appearance and an increased use of nonverbal acts. Concerning verbal production, the study shows how avatar movement in the nonverbal mode was used as a strategy to overcome verbal miscommunication when expressing direction and orientation and also the benefits of using the textchat modality for feedback on language form in order to support learners' productions in the audio modality. In light of these results, the study suggests some considerations concerning the design of pedagogical activities for language learning within synthetic worlds.

Cette recherche a pour objet un dispositif de télécollaboration asymétrique qui met en relation des apprentis tuteurs de FLE avec des apprenants distants. Notre objectif est d’examiner le parcours de l’apprenant à travers ses activités et ses échanges avec les tuteurs. La communication entre les deux groupes est exclusivement médiatisée par ordinateur à travers une plateforme d’apprentissage en mode asynchrone (forums) et quasi-synchrone (clavardage). La recherche est focalisée sur les apprenants et elle cherche à voir si leurs échanges en ligne avec les tuteurs se révèlent potentiellement acquisitionnels au plan de l’interaction verbale et de la réflexion sur la langue.La recherche s’inscrit dans le domaine des sciences du langage et plus particulièrement de la didactique des langues, dans la lignée des recherches en apprentissage des langues assisté par ordinateur (ALAO, CALL en anglais). Ayant comme objectif de mieux comprendre le vécu et l’activité des apprenants, de manière holistique, nous faisons appel à d’autres champs d’études, à savoir les sciences de l’éducation, les sciences de l’information et de la communication, les technologies éducatives et la psychologie des apprentissages. Ainsi, notre cadre conceptuel est transdisciplinaire.Nos analyses reposent sur deux axes. Le premier a pour but d’examiner la dimension communicationnelle des échanges en ligne à travers les tâches proposées aux apprenants par les tuteurs. Le second vise à étudier les pratiques « méta » des apprenants, issues du feedback correctif que les tuteurs donnent aux apprenants dans le cadre de leurs tâches. Nous avons recueilli plusieurs types de données et pour répondre à nos questions de recherche, nous recourons à leur triangulation. Nous avons adopté une démarche descriptive et notre analyse est qualitative et empirico-inductive. Nous avons aussi fait appel à l’approche systémique qui nous permet d’étudier l’ensemble des éléments de notre système, interreliés de telle manière que tout changement d’un paramètre a un effet sur les autres.Cette étude a deux visées : herméneutique et praxéologique. D’une part, nous cherchons à étudier et à comprendre l’activité d’apprentissage à travers les technologies tout en prenant en compte les relations qui existent entre le contexte et le sens que l’apprenant accorde à l’apprentissage dans ce même contexte. D’autre part, la recherche propose quelques pistes pédagogiques, interactionnelles et ingénieriques fondées sur les échanges observés ; l’objectif est d’améliorer les pratiques d’apprentissage à partir de la télécollaboration asymétrique étudiée grâce à la modélisation de certains paramètres. / This research looks into an asymmetric telecollaborative exchange, where tutor trainees of French as a foreign language communicate with distance learners. Our work examines students’ paths through their learning activities and exchanges with the tutors. Communication between the two groups is exclusively mediated by computer, via a learning platform in asynchronous and quasi-synchronous mode (forums and chats respectively). The research focuses on learners and aims at studying whether online exchanges with tutors prove to be potentially acquisitional in terms of verbal interaction and reflection on language.The research focuses on language sciences and in particular on applied linguistics in line with research on computer assisted language learning (CALL). With a view to better understanding learners’ experience and activity, in a holistic approach, we also refer to other fields of study, such as educational sciences, information and communication sciences, educational technologies and psychology of learning. Thus, our conceptual framework is transdisciplinary.Our analysis consists of two phases. Firstly, we examine the communicative dimension of online exchanges through tasks designed for the learners by the tutors. Secondly, we study learners’ “meta” practices, coming from the tutors’ corrective feedback on their tasks. We collected several types of data and, in order to answer to our research questions, we used data triangulation. We used a descriptive approach and our analysis is qualitative and empirico-inductive. We also used a systemic approach, which allows us to examine all of the elements of our system. These elements are interrelated in such a way that any change of one parameter has an effect on the others.This study has two goals: hermeneutics and praxeological. On the one hand, we intend to study and understand learning activity through technology, while taking into account the relationship between the context and the meaning that the learner gives to learning within this context. On the other hand, our research suggests some pedagogical leads based on the exchanges we studied; our aim is to improve learning practices from asymmetric telecollaboration observed by modelling certain parameters.

Cette recherche vise à analyser la communication pédagogique multimodale dans des mondes synthétiques (virtuels). L'étude se focalise sur le rapport entre le verbal et le non verbal et son rôle de soutien pour la production et la participation verbales en langue étrangère. Celui-ci est analysé dans une perspective socio-sémiotique de la multimodalité, dans le contexte d'une formation conduite dans le monde synthétique Second Life selon une approche Enseignement d'une Matière Intégré à une Langue Étrangère (Emile). La formation, 'Building Fragile Spaces' menée dans le cadre du projet européen ARCHI21 a été conçue pour des étudiants d'architecture dont la langue étrangère était soit le français soit l'anglais.Le rapport entre le verbal et le non verbal est examiné selon trois angles différents. Premièrement, le rôle du non verbal pendant une activité de construction collaborative est analysé au vu des opportunités offertes par des mondes synthétiques pour la co-création de l'environnement et pour la collaboration. A travers cette étude, nous nous demandons si l'utilisation du mode non verbal a un impact sur la participation des étudiants dans le mode verbal et si le rapport entre ces deux modes a une influence sur la production verbale. Deuxièmement, l'utilisation du non verbal pour la construction des identités est abordée et est considérée en rapport avec l'interaction et la participation verbale des étudiants dans la langue étrangère. Finalement, la recherche se concentre sur le rapport entre les modalités audio et clavardage dans le mode verbal. Plus particulièrement, l'étude s'intéresse au rôle du clavardage dans l'interaction puisqu'il est en compétition non seulement avec l'audio mais également avec plusieurs modalités non verbales. La possibilité d'utiliser le clavardage pour la rétroaction est également abordée.Cette thèse cherche à contribuer aux considérations méthodologiques exigées pour que la recherche concernant la communication pédagogique multimodale dans des mondes synthétiques puisse aller au-delà des exemples spéculatifs et anecdotiques. Une typologie de modalités verbales et non verbales est proposée. Elle sert à étendre une méthodologie proposée pour la transcription des interactions multimodales aux interactions possibles dans les mondes synthétiques. En vue de la problématique plus générale, dans les domaines des Sciences Humaines et des Sciences du Langage, il s'agit de rendre visibles et accessibles publiquement les données utilisées pour les analyses. En effet, cette étude se réfère à un corpus d'apprentissage dans son approche méthodologique. La construction d'un corpus structuré permet d'effectuer des analyses contextualisées des données recueillies lors de la formation 'Building Fragile Spaces'.Cette recherche propose quelques éléments de réponse concernant l'augmentation de la participation verbale en rapport avec l'organisation proxémique des étudiants, la customisation de l'apparence des avatars des étudiants et l'utilisation importante des actes non verbaux. Concernant la production verbale, l'étude décrit comment, dans le mode non verbal, le mouvement de l'avatar est employé en tant que stratégie pour surmonter des difficultés de communication dans le mode verbal. Ces difficultés concernent, en particulier, l'expression de la direction et de l'orientation. L'étude montre également l'intérêt d'utiliser le clavardage pour offrir de la rétroaction concernant la forme linguistique dans le but de soutenir la production verbale des apprenants dans la modalité audio. Au vu des résultats, l'étude propose quelques considérations concernant la conception des activités pédagogiques pour l'apprentissage des langues dans des mondes synthétiques. / This research focuses on multimodal pedagogical communication in synthetic (virtual) worlds. The study investigates the interplay between verbal and nonverbal interaction which supports verbal participation and production in a foreign language. This is analysed from a socio-semiotic perspective of multimodality within the context of a course held in the synthetic world Second Life, which adopted a Content and Language Integrated Learning (CLIL) approach. The course, entitled 'Building Fragile Spaces', formed part of the European project ARCHI21. It was designed for higher education students of Architecture whose foreign language was either French or English.The interplay between verbal and nonverbal interaction is examined from three different angles. Firstly, considering the opportunities synthetic worlds offer for the co-creation of the environment through building activities and for collaboration, the role played by the nonverbal mode during a collaborative building activity is investigated. The study questions whether the use of the nonverbal mode impacts on the participation of students in the verbal mode, and whether any interplay exists between these two modes that influences verbal production. Secondly, use of the nonverbal mode by students in inworld identity construction is addressed and considered with reference to their verbal interaction, and participation, in the foreign language. Thirdly, the research concentrates upon interplay between the audio and textchat modalities in the verbal mode. More specifically, the focus is on whether the textchat plays a role during interaction, considering it is in competition not only with the audio modality but also with several nonverbal modalities; and on whether the textchat modality can serve for feedback provision on language form.This thesis seeks to contribute to the methodological considerations to allow research to move beyond speculative and anecdotal examples of multimodal pedagogical communication in synthetic worlds. A typology of nonverbal and verbal modalities is proposed, and then drawn upon, to extend a previous methodology suggested for multimodal transcription to interactions in synthetic worlds. Considering, within the fields of Social Sciences and Language Sciences, the more general research problem to render research data used for analyses visible and publically accessible, the study adopts a LEarning and TEaching Corpus (LETEC) methodological approach. Constituting a structured corpus allows for contextual analyses of the data collected during the 'Building Fragile Spaces' course.This research offers insights into how verbal participation increases with reference to the proxemic organisation of students, the customization of students' avatar appearance and an increased use of nonverbal acts. Concerning verbal production, the study shows how avatar movement in the nonverbal mode was used as a strategy to overcome verbal miscommunication when expressing direction and orientation and also the benefits of using the textchat modality for feedback on language form in order to support learners’ productions in the audio modality. In light of these results, the study suggests some considerations concerning the design of pedagogical activities for language learning within synthetic worlds.

Cette étude examine comment les élèves communiquent par écrit lorsqu'ils savent que leur interlocuteur est un autre élève humain par rapport à la façon dont ils communiquent lorsqu'ils savent que leur partenaire est un « chatbot », un agent conversationnel artificiel qui communique par écrit en utilisant le langage naturel. Les participants sont des lycéens d’un cours de français langue étrangère (FLE) en Suède. Les élèves ont écrit à leurs pairs via la messagerie instantanée (IM) et au chatbot via un site Webb. Les conversations ont été comparées, et leurs variables linguistiques ont été distinguées selon les dimensions suivantes : mots par message et par conversation, messages par conversation, diversité lexicale et fréquence d'émoticônes. Au cours des dernières années, tant les linguistes que les chercheurs en Intelligence Artificielle ont été contraints de traiter des problèmes de contexte, de syntaxe, de sémantique et de pragmatique (Rosenberg, 1975). Il existe des études qui abordent la question de la coopération entre la linguistique et le traitement automatique du langage naturel (TALN) qui se concentrent sur la façon dont les chatbots communiquent par écrit avec les humains. Cependant, cette étude est concentrée sur l'humain, évaluant la langue et distinguant les caractéristiques linguistiques utilisées du côté de l’humain conversant avec un chatbot. Les résultats ont montré que les messages élèves-chatbot contenaient moins de mots par message que ceux envoyés à un autre élève, mais les élèves ont envoyé plus de deux fois plus de messages au chatbot qu'à leurs pairs. L'étude a révélé qu'il existe un niveau de motivation plus élevé chez les élèves lorsqu'ils s'engagent dans des conversations avec l'agent artificiel par rapport aux autres étudiants.