Les approches formelles de représentation des signes des langues des signes sont majoritairement paramétriques et nous montrons en quoi celles-ci ne sont pas suffisantes dans l'optique d'une utilisation informatique. Les plus fortes raisons sont le caractère ni nécessaire ni suffisant de l'ensemble de paramètres traditionnellement utilisé, leur nature fixe alors qu'un signe est dynamique et évolue au cours du temps, et le fait que les descriptions ne rendent pas compte de l'adaptabilité des signes décrits à différents contextes, pourtant à l'origine de leur réutilisabilité et de la force de concision des langues des signes. Nous proposons Zebedee, un modèle de description en séquence d'unités temporelles décrivant chacune un ensemble de contraintes nécessaires et suffisantes, appliquées à un squelette. L'espace de signation est vu comme un espace euclidien dans lequel toute construction géométrique annexe est possible. Les dépendances entre éléments des descriptions ou sur des valeurs contextuelles sont non seulement possibles mais pertinentes, et reposent sur des considérations à la fois articulatoires, cognitives et sémantiques. Nous donnons ensuite deux processus complémentaires d'évaluation : en informatique où nous discutons l'implantation de Zebedee dans une plateforme d'animation de signeur virtuel et son utilisation pour la diffusion d'informations en gare, et en linguistique où nous décrivons l'avantage d'une base de données et les nouvelles possibilités de requêtes offertes au linguiste. En perspectives, nous citons plusieurs domaines informatiques où Zebedee sera utile et plusieurs questionnements linguistiques actuels auxquels il offre des pistes de réponse.

Depuis la loi du 11-02-2005 pour l'égalité des droits et des chances, les lieux ouverts au public doivent accueillir les Sourds en Langue des Signes Française (LSF). C'est dans le cadre du développement d'outils technologiques de diffusion de LSF que nous avons travaillé, plus particulièrement au niveau de la traduction automatique du français écrit vers la LSF. Notre thèse commence par un état de l'art relatif aux connaissances sur la LSF (ressources disponibles et supports d'expression de la LSF) avant d'approfondir des notions de grammaire descriptive. Notre hypothèse de travail est la suivant : la LSF est une langue et, à ce titre, la traduction automatique lui est applicable. Nous décrivons ensuite les spécifications linguistiques pour le traitement automatique, en fonction des observations mises en avant dans l'état de l'art et des propositions de nos informateurs. Nous détaillons notre méthodologie et présentons l'avancée de nos travaux autour de la formalisation des données linguistiques à partir des spécificités de la LSF dont certaines (model verbal, modification adjectivale et adverbiale, organisation des substantifs, problématiques de l'accord) ont nécessité un traitement plus approfondi. Nous présentons le cadre applicatif dans lequel nous avons travaillé : les systèmes de traduction automatique et d'animation de personnage virtuel de France Telecom R&D. Puis, après un rapide état de l'art sur les technologies avatar nous décrivons nos modalités de contrôle du moteur de synthèse de geste grâce au format d'échange mis au point. Enfin, nous terminons par nos évaluations et perspectives de recherche et de développements qui pourront suivre cette Thèse. Notre approche a donné ses premiers résultats puisque nous avons atteint notre objectif de faire fonctionner la chaîne complète de traduction : de la saisie d'un énoncé en français jusqu'à la réalisation de l'énoncé correspondant en LSF par un personnage de synthèse.

Cette thèse présente le développement d'un framework formel pour la représentation des Langues de Signes (LS), les langages des communautés Sourdes, dans le cadre de la construction d'un système de reconnaissance automatique. Les LS sont de langues naturelles, qui utilisent des gestes et l'espace autour du signeur pour transmettre de l'information. Cela veut dire que, à différence des langues vocales, les morphèmes en LS ne correspondent pas aux séquences de sons; ils correspondent aux séquences de postures corporelles très spécifiques, séparés par des changements tels que de mouvements. De plus, lors du discours les signeurs utilisent plusieurs parties de leurs corps (articulateurs) simultanément, ce qui est difficile à capturer avec un système de notation écrite. Cette situation difficulté leur représentation dans de taches de Traitement Automatique du Langage Naturel (TALN). Pour ces raisons, le travail présenté dans ce document a comme objectif la construction d'une représentation abstraite de la LS; plus précisément, le but est de pouvoir représenter des collections de vidéo LS (corpus) de manière formelle. En générale, il s'agit de construire une couche de représentation intermédiaire, permettant de faire de la reconnaissance automatique indépendamment des technologies de suivi et des corpus utilisés pour la recherche. Cette couche corresponde à un système de transition d'états (STE), spécialement crée pour représenter la nature parallèle des LS. En plus, elle peut-être annoté avec de formules logiques pour son analyse, à travers de la vérification de modèles. Pour représenter les propriétés à vérifier, une logique multi-modale a été choisi : la Logique Propositionnelle Dynamique (PDL). Cette logique a été originalement crée pour la spécification de programmes. De manière plus précise, PDL permit d'utilise des opérateurs modales comme [a] et <a>, représentant <<nécessité>> et <<possibilité>>, respectivement. Une variante particulaire a été développée pour les LS : la PDL pour Langue de Signes (PDLSL), qui est interprété sur des STE représentant des corpus. Avec PDLSL, chaque articulateur du corps (comme les mains et la tête) est vu comme un agent indépendant; cela veut dire que chacun a ses propres actions et propositions possibles, et qu'il peux les exécuter pour influencer une posture gestuelle. L'utilisation du framework proposé peut aider à diminuer deux problèmes importantes qui existent dans l'étude linguistique des LS : hétérogénéité des corpus et la manque des systèmes automatiques d'aide à l'annotation. De ce fait, un chercheur peut rendre exploitables des corpus existants en les transformant vers des STE. Finalement, la création de cet outil à permit l'implémentation d'un système d'annotation semi-automatique, basé sur les principes théoriques du formalisme. Globalement, le système reçoit des vidéos LS et les transforme dans un STE valide. Ensuite, un module fait de la vérification formelle sur le STE, en utilisant une base de données de formules crée par un expert en LS. Les formules représentent des propriétés lexicales à chercher dans le STE. Le produit de ce processus, est une annotation qui peut être corrigé par des utilisateurs humains, et qui est utilisable dans des domaines d'études tels que la linguistique. / This thesis presents a formal framework for the representation of Signed Languages (SLs), the languages of Deaf communities, in semi-automatic recognition tasks. SLs are complex visio-gestural communication systems; by using corporal gestures, signers achieve the same level of expressivity held by sound-based languages like English or French. However, unlike these, SL morphemes correspond to complex sequences of highly specific body postures, interleaved with postural changes: during signing, signers use several parts of their body simultaneously in order to combinatorially build phonemes. This situation, paired with an extensive use of the three-dimensional space, make them difficult to represent with tools already existent in Natural Language Processing (NLP) of vocal languages. For this reason, the current work presents the development of a formal representation framework, intended to transform SL video repositories (corpus) into an intermediate representation layer, where automatic recognition algorithms can work under better conditions. The main idea is that corpora can be described with a specialized Labeled Transition System (LTS), which can then be annotated with logic formulae for its study. A multi-modal logic was chosen as the basis of the formal language: the Propositional Dynamic Logic (PDL). This logic was originally created to specify and prove properties on computer programs. In particular, PDL uses the modal operators [a] and <a> to denote necessity and possibility, respectively. For SLs, a particular variant based on the original formalism was developed: the PDL for Sign Language (PDLSL). With the PDLSL, body articulators (like the hands or head) are interpreted as independent agents; each articulator has its own set of valid actions and propositions, and executes them without influence from the others. The simultaneous execution of different actions by several articulators yield distinct situations, which can be searched over an LTS with formulae, by using the semantic rules of the logic. Together, the use of PDLSL and the proposed specialized data structures could help curb some of the current problems in SL study; notably the heterogeneity of corpora and the lack of automatic annotation aids. On the same vein, this may not only increase the size of the available datasets, but even extend previous results to new corpora; the framework inserts an intermediate representation layer which can serve to model any corpus, regardless of its technical limitations. With this, annotations is possible by defining with formulae the characteristics to annotate. Afterwards, a formal verification algorithm may be able to find those features in corpora, as long as they are represented as consistent LTSs. Finally, the development of the formal framework led to the creation of a semi-automatic annotator based on the presented theoretical principles. Broadly, the system receives an untreated corpus video, converts it automatically into a valid LTS (by way of some predefined rules), and then verifies human-created PDLSL formulae over the LTS. The final product, is an automatically generated sub-lexical annotation, which can be later corrected by human annotators for their use in other areas such as linguistics.

Made available in DSpace on 2015-05-07T15:09:37Z (GMT). No. of bitstreams: 1 arquivototal.pdf: 969883 bytes, checksum: 8b472473c267112cf14284d31acae421 (MD5) Previous issue date: 2014-03-14 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior - CAPES / La présente thèse étudie le processus d implantation d une école bilingue pour sourds à Sumé, situé à Cariri, dans l État de Paraíba. L objectif général consiste à analyser la construction d une école bilingue pour les sourds dans la cité de Sumé/Paraiba, considérant le modèle bilingue d éducation des sourds comme une possibilité de politique contre-hégémonique au modèle de l éducation inclusive, nous nous donnons les objectifs spécifiques suivants : identifier la situation linguistique, identitaire, culturelle, éducationnelle et sociale des sourds de Sumé, à partir de l année 2010; révéler le contexte des politiques municipale et nationale pour l éducation des sourds, afin de favoriser l élaboration des conditions linguistiques et méthodologiques pour l enseignement des sourds à la municipalité de Sumé; établir des relations entre les procédures d investigation et les implications quant aux projets d extension « Bureau d implantation de l école bilingue pour les sourds de Sumé » et « Encouragement à la constitution de la communauté sourde de Sumé et des cités environnantes » de l UFCG. Pour cela, nous avons cherché à lier la proposition d une étude ethnographique à la perspective de la recherche-action. Autant que professeur de l UFCG, il a été possible d établir une relation entre les pratiques des projets d extension mentionnés plus haut et réalisés sous notre direction en 2011. Toujours dans le cadre de notre méthodologie, nous avons commencé par une recherche documentaire afin de comprendre le cadre politico-réglementaire des actions éducationnelles à l intention des sourds de Sumé, en relation au mouvement national d éducation aux sourds. Les données de la recherche ont été obtenues obtenus tant par des entretiens semistructurés et non structurés, que par l observation du quotidien social et scolaire de la municipalité, principalement dans les espaces utilisés par les sourds, afin de comprendre la complexité de la réalité linguistique, culturelle, et éducationnelle des sourds de la municipalité en question. Les informations recueillies en lien avec les analyses et les réflexions faites, nous permettent de soutenir la thèse selon laquelle la politique d inclusion scolaire des sourds n est pas réellement possible à une échelle locale en tant qu espace réellement inclusif. Pour cela, il y a eu la possibilité de développement d actions contrehégémoniques avec la création d écoles bilingues pour sourds comme locus des production linguistique, culturelle et identitaire en dehors des centres du pouvoir politique. Dans ce contexte, nous avons pu remarquer que l approche bilingue développée dans une école bilingue, permet réellement aux sourds de participer à leurs processus d éducation scolaire, contribuant ainsi fortement avec leur mouvement d affirmation du sourd comme faisant partie intégrante d une communauté linguistique spécifique. / O presente estudo investigou o processo de implantação de uma escola bilíngue para surdos em Sumé, no cariri paraibano. Traçado objetivo geral - analisar o movimento de construção de uma escola bilíngue para surdos na cidade de Sumé/PB, tendo o modelo bilíngue de educação de surdos como uma possibilidade de política contra-hegemônica ao modelo de educação inclusiva -, delimitamos os seguintes objetivos específicos: identificar a situação linguística, identitária, cultural, educacional e social dos surdos de Sumé, tomando como período de início do processo investigativo o ano de 2010; levantar o contexto da política municipal e nacional para educação de surdos, que desse base à elaboração das condições linguísticas e metodológicas para o efetivo ensino de pessoas surdas no município de Sumé; relacionar os procedimentos investigativos às implicações interventivas dos projetos de extensão Assessoria para a implantação da escola bilíngue para Surdos de Sumé e Fomento à construção da comunidade surda de Sumé e cidades circunvizinhas" - da UFCG. Para tal, buscamos aliar a proposta de estudo etnográfico à perspectiva da pesquisa-ação. Desse modo, foi possível relacionarmos as práticas interventivas dos já referidos projetos de extensão, sob nossa coordenação, enquanto docente da UFCG, realizados em 2011. Ainda como parte da opção metodológica, desenvolvemos um levantamento documental, como forma de compreendermos o quadro políticoregulamentador das ações educacionais direcionadas aos surdos de Sumé, aliando-o ao movimento nacional de educação para surdos. Os dados da pesquisa foram obtidos por meio de entrevistas semiestruturadas e não estruturadas e observações do cotidiano social e escolar do município, principalmente, dos espaços utilizados pelos surdos, como forma de entendermos a complexidade da realidade linguística, cultural e educacional dos surdos sumeenses. As informações produzidas juntamente com as análises e reflexões feitas nos permitem defender a tese de que a política de inclusão escolar dos surdos não se sustenta em escala local como espaço realmente inclusivo. Por isso, houve possibilidade de desenvolvimento de ações contra-hegemônicas com a criação de escolas bilíngues para surdos como locus da produção linguística, cultural e identitária, fora dos centros do poder político. Nesse contexto, pudemos constatar que a abordagem bilíngue, desenvolvida numa escola bilíngue, permite aos surdos, realmente, participar de seu processo de educação escolar, contribuindo fortemente com o movimento de afirmação do surdo como integrante de uma comunidade linguística.

Le LPC est un complément à la lecture labiale qui facilite la communication des malentendants. Sur le principe, il s'agit d'effectuer des gestes avec une main placée à côté du visage pour désambigüiser le mouvement des lèvres, qui pris isolément est insuffisant à la compréhension parfaite du message. Le projet RNTS TELMA a pour objectif de mettre en place un terminal téléphonique permettant la communication des malentendants en s'appuyant sur le LPC. Parmi les nombreuses fonctionnalités que cela implique, il est nécessaire de pouvoir reconnaître le geste manuel du LPC et de lui associer un sens. L'objet de ce travail est la segmentation vidéo, l'analyse et la reconnaissance des gestes de codeur LPC en situation de communication. Cela fait appel à des techniques de segmentation d'images, de classification, d'interprétation de geste, et de fusion de données. Afin de résoudre ce problème de reconnaissance de gestes, nous avons proposé plusieurs algorithmes originaux, parmi lesquels (1) un algorithme basé sur la persistance rétinienne permettant la catégorisation des images de geste cible et des images de geste de transition, (2) une amélioration des méthodes de multi-classification par SVM ou par classifieurs unaires via la théorie de l'évidence, assortie d'une méthode de conversion des probabilités subjectives en fonction de croyance, et (3) une méthode de décision partielle basée sur la généralisation de la Transformée Pignistique, afin d'autoriser les incertitudes dans l'interprétation de gestes ambigus.

Depuis la loi du 11-02-2005 pour l’égalité des droits et des chances, les lieux ouverts au public doivent accueillir les Sourds en Langue des Signes Française (LSF). C’est dans le cadre du développement d’outils technologiques de diffusion de LSF que nous avons travaillé, plus particulièrement au niveau de la traduction automatique du français écrit vers la LSF. Notre thèse commence par un état de l’art relatif aux connaissances sur la LSF (ressources disponibles et supports d’expression de la LSF) avant d’approfondir des notions de grammaire descriptive. Notre hypothèse de travail est la suivant : la LSF est une langue et, à ce titre, la traduction automatique lui est applicable.Nous décrivons ensuite les spécifications linguistiques pour le traitement automatique, en fonction des observations mises en avant dans l’état de l’art et des propositions de nos informateurs. Nous détaillons notre méthodologie et présentons l’avancée de nos travaux autour de la formalisation des données linguistiques à partir des spécificités de la LSF dont certaines (model verbal, modification adjectivale et adverbiale, organisation des substantifs, problématiques de l’accord) ont nécessité un traitement plus approfondi. Nous présentons le cadre applicatif dans lequel nous avons travaillé : les systèmes de traduction automatique et d’animation de personnage virtuel de France Telecom R&D. Puis, après un rapide état de l’art sur les technologies avatar nous décrivons nos modalités de contrôle du moteur de synthèse de geste grâce au format d’échange mis au point. Enfin, nous terminons par nos évaluations et perspectives de recherche et de développements qui pourront suivre cette Thèse.Notre approche a donné ses premiers résultats puisque nous avons atteint notre objectif de faire fonctionner la chaîne complète de traduction : de la saisie d'un énoncé en français jusqu'à la réalisation de l'énoncé correspondant en LSF par un personnage de synthèse. / Since the law was voted the 11-02-2005 for equal rights and opportunities: places open to anyone (public places, shops, internet, etc.) should welcome the Deaf in French Sign Language (FSL). We have worked on the development of technological tools to promote LSF, especially in machine translation from written French to FSL.Our thesis begins with a presentation of knowledge on FSL (theoretical resources and ways to edit FSL) and follows by further concepts of descriptive grammar. Our working hypothesis is: FSL is a language and, therefore, machine translation is relevant.We describe the language specifications for automatic processing, based on scientific knowledge and proposals of our native FSL speaker informants. We also expose our methodology, and do present the advancement of our work in the formalization of linguistic data based on the specificities of FSL which certain (verbs scheme, adjective and adverb modification, organization of nouns, agreement patterns) require further analysis.We do present the application framework in which we worked on: the machine translation system and virtual characters animation system of France Telecom R&D.After a short avatar technology presentation, we explain our control modalities of the gesture synthesis engine through the exchange format that we developed.Finally, we conclude with an evaluation, researches and developments perspectives that could follow this thesis.Our approach has produced its first results since we have achieved our goal of running the full translation chain: from the input of a sentence in French to the realization of the corresponding sentence in FSL with a synthetic character.

En partant du cadre conceptuel des modèles IDRC (Interprétation-Décisions-Ressources- Contraintes) et du modèle d'Efforts de l'interprétation simultanée de Daniel Gile entre langues vocales, nous tenterons d'analyser le processus de l'interprétation en langue des signes et étudierons la charge cognitive inhérente au passage d'une langue vocale (canal audio-vocal), à une langue signée (canal visuo-gestuel). Nous analyserons en premier lieu l’ensemble des contraintes concourant à l’exercice de l’interprétation en langue des signes pouvant se distinguer de celles généralement observées en interprétation entre langues vocales (nous incluons les langues vocales syntaxiquement très éloignées) telles que les contraintes socio-économiques, les contraintes linguistiques et enfin les contraintes d’espace. Nous procéderons ensuite à une analyse cognitive du processus de l’interprétation en nous référant au modèle d'Efforts de l’interprétation simultanée de Gile (Effort d'Écoute et d'Analyse, Effort de Mémorisation à court terme, Effort de Production, Effort de Coordination de ces trois activités simultanées), et nous chercherons à envisager sa transposition aux langues des signes. Pour mieux comprendre les mécanismes constitutifs du processus, nous observerons particulièrement le concept de scénarisation (Séro-Guillaume, 2008) pour une première analyse de la charge cognitive de l’interprète en action. Cette capacité de représentation synthétique visuelle est-elle plus ou moins grande si on prend en compte le degré d'abstraction du discours, la technicité de l'énoncé, le manque de correspondances lexicales, le contexte de l'interprétation (pédagogique, conférence, etc.), la préparation ? Notre analyse du processus se base sur un corpus constitué de plusieurs études empiriques d’interprétations vers la langue des signes : une étude semi-expérimentale, une étude de cas naturaliste et une étude expérimentale, ainsi que sur des interviews d’interprètes et un focus group. Les observations faites sur l’ensemble de ces études nous ont permis de croiser nos données et de dégager les éléments pertinents de nos résultats pour une avancée dans la compréhension du processus cognitif de l’interprétation en langue des signes. / Taking as its point of departure the conceptual framework provided by the IDRC models (Interpreting-Decisions-Resources-Constraints) and Daniel Gile’s Effort model of simultaneous interpreting between spoken languages, this thesis aims to analyse the process of sign language interpreting and study the cognitive load inherent in encoding information from a spoken language (an auditory-vocal modality of language production) into signed language (a vision and gesture-based modality). The first part of the work analyses the set of constraints involved in the exercise of sign language interpreting, as distinguished from those generally observed to apply between spoken languages (including languages syntactically far apart), such as socio-economic constraints, linguistic constraints and, finally, spatial constraints. There follows a cognitive analysis of the interpreting process with reference to Gile’s Effort model of simultaneous interpreting (Listening and Analysis Effort, Memory Effort, Production Effort, Effort of Coordination of these three simultaneous activities), with an attempt to envisage transposing its application to sign language. In order to gain better understanding of the constituent mechanisms of the process, initial analysis of the cognitive load of the interpreter in action accords particular attention to the concept of scénarisation (scene-staging) (Séro-Guillaume, 2008). Is this capacity for creating a visual picture from sequential meaning greater or lesser when factors such as the degree of abstraction of the speech, the technicality of its content, a lack of lexical correspondence, the interpreting context (educational setting, conference setting, etc), and the amount of preparation are taken into account? Analysis of the process is based upon a corpus comprising several empirical studies of interpreting into sign language: a semi-experimental study, a naturalistic case study, and an experimental study, as well as on interpreter interviews and a focus group. The observations drawn from all of these studies have enabled cross-referencing of our data and the identification of the relevant elements of our research results in order to advance understanding of the cognitive process of sign language interpreting.

Cette thèse de doctorat de recherche-création comporte un essai doctoral en français ainsi qu'une bande dessignée: une bande dessinée vidéographiée bilingue en langue des signes québécoises (LSQ) et français, composée de 10 chapitres-vidéos. / C’est tombé dans l’oreille d’une Sourde. La sourditude par la bande dessignée est une recherche-création composée d’un essai doctoral et d’une bande dessignée - une bande dessinée bilingue en langue des signes québécoise (LSQ) et en français (BD*) - produite à partir d’extraits de rencontres avec des personnes sourdes et des membres de ma famille entendante réalisées dans le cadre de la thèse. Par une démarche exploratoire, la recherche vise à documenter et à réfléchir à ce que cela fait de vivre comme personne sourde, à la sourditude comme devenir, à l'entendance comme concept pour réfléchir à certains rapports de pouvoirs ainsi qu’aux enjeux communicationnels, technologiques et médiatiques soulevés par les perspectives épistémologiques sourdiennes. C’est en partant du postulat que l’oppression est ce qui est éprouvé à travers des pratiques quotidiennes souvent bien intentionnées (Young, 1990) et avec le désir de composer avec l’exigence du multiple (Deleuze et Guattari, 1980) que s’est développée la question générale de la thèse : En la posant comme un devenir complexe, comment l'expérience singulière de la sourditude, son affectivité et son effectivité se conçoivent, s'actualisent et se communiquent-elles? Cette question se pose dans son articulation avec le lieu où elle prend forme, à savoir la réalisation d’un essai doctoral et d’une BD*, dont le processus sert de milieu exploratoire à diverses questions d’ordre philosophique, théorique, épistémologique, éthique, artistique et politique qui, à leur tour, nourrissent la démarche. Utilisant la vidéo comme forme d’écriture apte à rendre compte de la tridimensionnalité des langues des signes et de leurs composantes linguistiques, la BD* est produite sous forme de chapitres vidéo diffusés sur un site Internet. Produite en noir et blanc, elle comporte des vidéos de protagonistes signant la LSQ, éditées avec un effet de dessin animé, des textes en français disposés dans des phylactères et des arrière-plans édités avec un logiciel de graphisme. Écrit sous forme de dissertation, l’essai comporte cinq chapitres. De façon sommaire, l’introduction présente la recherche-création, la question de recherche et les différentes parties de l’essai; le chapitre 1 intitulé « Les possibles de la sourditude » met en jeu quelques éléments afin d’appréhender la sourditude dans sa complexité, problématise et historicise la sourditude en tant que processus, devenir et appartenance, théorise diverses dimensions de l’oppression, interroge l'expérience subjective comme site de savoirs et propose une analyse critique du concept de sourditude; le chapitre 2 intitulé « Parcours de recherche-création » s’articule autour de la démarche de réalisation de la BD*, documente mon approche de la recherche-création, interroge ma posture épistémologique à travers le paradoxe de vouloir contribuer à « faire entendre des voix sourdes », discute des enjeux soulevés par l’écriture vidéographiée, s’intéresse aux enchevêtrements du cinéma et de la sourditude sous divers angles et discerne certains enjeux relatifs à la situation de la BD* aux confins des codes de la littérature, du cinéma et de la BD; le chapitre 3 intitulé « La production de la bande dessignée » s’attarde de façon plus précise aux diverses étapes de réalisation de la BD*, aborde les rencontres réalisées avec cinq Sourd-es et quatre membres de ma famille entendante, documente le processus de production et postproduction de la BD* en soulevant certains enjeux sur le plan de la traduction et du montage, analyse de façon critique l’Internet comme plateforme de diffusion et présente le site Internet www.BDLSQ.net; la conclusion intitulée « Quelques enjeux posés par la sourditude » propose certaines réflexions issues des rencontres, interroge la question des technologies à travers la notion de sourditude et du handicap, amorce une réflexion sur l’agentivité conférée par les media numériques et se termine en soulevant quelques enjeux politiques et éthiques concernant le développement des études sourdes et des perspectives sourdiennes. / Résumé en langue des signes québécoise (LSQ) disponible à l’adresse Internet suivante : V. Leduc. 2016. « C’est tombé dans l’oreille d’une Sourde. La sourditude par la bande dessignée ». Résumé LSQ. En ligne: https://vimeo.com/190658903 / Abstract in American Sign Language (ASL) available on the following website : V. Leduc. 2016. "It Fell on Deaf Ears. Deafhood by Graphic Signed Novel". PhD thesis, ASL Abstract. Online: https://vimeo.com/190659491 / It Fell on Deaf Ears. Deafhood by Graphic Signed Novel (C’est tombé dans l’oreille d’une Sourde. La sourditude par la bande dessignée) is a research-creation project consisting of a doctoral essay and a bilingual graphic signed novel in Québec sign language (LSQ) and in French, produced from excerpts of encounters with Deaf people and with members of my hearing family that have been carried out as part of the thesis. Through an exploratory process, the project seeks to document and to reflect upon what it means to live as a Deaf person, about Deafhood as becoming, about hearingness as a concept that can be used to think about certain power relations, as well as about the communicative, technological and media issues that arise from deafian epistemological perspectives. From the assumption that oppression is experienced through often well-intentioned everyday practices (Young, 1990), and from an interest in dealing with the requirement of multiplicity (Deleuze and Guattari, 1980), was developed the broad question of the thesis: while positioning it as a complex becoming, how can the singular experience of Deafhood, its affects and effects, be conceived, actualized and communicated? This question is posed through its articulation with the site where it takes shape, namely the creation of a doctoral essay and a graphic signed novel, the process of which serves as an exploratory site for various philosophical, theoretical, epistemological, ethical, artistic and political questions, which, in turn, feed the process. Using video as a form of writing that is able to account for the three-dimensionality of sign languages and of their linguistic components, the graphic signed novel is produced as video chapters distributed on a website. Produced in black and white, it features videos of protagonists signing in LSQ edited with a cartoon effect, French text inscribed in speech bubbles, and backgrounds that have been edited with graphic design software. The production team and the project are presented in LSQ, ASL, French and English on the website www.BDLSQ.net. Written in the form of a dissertation, the essay includes five chapters. In summary, the introduction presents the research-creation project, the research question and the different parts of the essay. Chapter 1, titled “The Possibilities of Deafhood”, brings together elements that help us understand Deafhood in its complexity, problematizes and historicizes Deafhood as a process, becoming and belonging, theorizes various dimensions of oppression, questions the subjective experience as a site of knowledge, and provides a critical analysis of the concept of Deafhood. Chapter 2, titled “Trajectory of Research-Creation”, revolves around the process of making a bilingual graphic signed novel; documenting my research-creation approach, and questioning my epistemological stance through the paradox of wanting to make “Deaf voices heard”. The chapter further discusses issues raised by videographed writing, is interested in the entanglements of film and Deafhood from various angles, and identifies some questions related to the place of the graphic signed novel in relation to the confines of the codes of literature, film and the graphic novel. Chapter 3, titled “The Creation of the Graphic Signed Novel”, focuses more specifically on the various production stages of the graphic signed novel. It addresses the meetings held with five Deafs and four members of my hearing family, documents the production and postproduction processes of the graphic signed novel while raising some issues related to translation and editing, analyzes, in a critical way, the internet as a distribution platform, and introduces the website www.BDLSQ.net. The conclusion, titled “Some Challenges Posed by Deafhood”, offers some reflections stemming from the meetings, interrogates the question of technologies through the notions of Deafhood and disability, proposes a reflection on agency afforded through digital media, and ends by raising some political and ethical issues related to the development of Deaf studies and perspectives. Keywords : Deafhood, graphic novel, digital art, signed litterature, video, transmedia, Deaf Studies, Critical Disability Studies, intersectionality, audism, Quebec Sign Language.

Introduction. Les fonctions cognitives évoluent avec l’âge : certaines tendent à diminuer dans leur efficacité alors que d’autres se maintiennent. Des recherches ont montré que le vieillissement affecte la rotation mentale, la perception spatiale, la visualisation spatiale et la prise de perspective. Des facteurs sociodémographiques et comportementaux peuvent aussi influencer le cheminement du vieillissement cognitif des personnes âgées. À titre d’exemple, l'expérience langagière, comme le bilinguisme, agit comme un facteur neuroprotecteur contribuant à la réserve cognitive. L’impact de l’utilisation d’une langue des signes sur la cognition spatiale a suscité beaucoup d’intérêt chez les chercheurs s’intéressant aux langues des signes. Pourtant, aucune recherche n’a encore abordé l’effet de l’utilisation à long terme d’une langue des signes sur la cognition spatiale des signeurs aînés. Objectif. Le but de cette thèse est d’examiner s’il existe des différences sur le plan des habiletés spatiales entre signeurs (sourds et entendants) et non-signeurs de différents groupes d’âge. Plus précisément, cette thèse a examiné i) si la performance à des tâches d’habiletés spatiales diffère selon l’âge (jeunes adultes/aînés) et l’expérience linguistique (signeurs sourds/entendants signeurs/entendants non-signeurs) et ii) si la performance diffère selon la sous-composante d’habiletés spatiales ciblée (perception spatiale; visualisation spatiale; rotation mentale; prise de perspective). Méthode. Pour investiguer l’effet de l’âge et de l’expérience linguistique sur les habiletés spatiales, une collecte de données auprès de 120 participants a été effectuée : 60 adultes âgés de 64 à 80 ans (20 sourds signeurs, 20 entendants signeurs, 20 entendants non-signeurs) et 60 jeunes adultes de 18 à 35 ans (20 sourds signeurs, 20 entendants signeurs, 20 entendants non-signeurs). Afin de s’assurer de l’admissibilité des participants, une évaluation de l’acuité visuelle, de l’acuité auditive, des compétences langagières (français et langue des signes québécoise), de la santé cognitive et de l’intelligence a été effectuée. Les participants ont été appariés entre groupes d’expérience linguistique selon leur niveau d’éducation et d’intelligence. Les quatre sous-composantes d’habiletés spatiales ciblées (perception spatiale; visualisation spatiale; rotation mentale; prise de perspective) ont été testées par l’entremise d’une batterie de sept tests psychométriques. Résultats. Conformément à ce qui a été précédemment observé sur l’effet de l’âge sur les habiletés spatiales, les résultats en termes de justesse de la réponse ont révélé que les jeunes signeurs sourds obtiennent globalement de meilleurs résultats que les signeurs sourds aînés dans toutes les tâches d’habiletés spatiales. De plus, les résultats ont montré un avantage des entendants signeurs sur les entendants non-signeurs aux tâches de rotation mentale et de prise de perspective, quel que soit leur âge. Un avantage général des signeurs aînés (sourds et entendants) par rapport aux non-signeurs aînés a été observé uniquement pour les tâches de visualisation spatiale en termes de justesse de la réponse. Ces résultats suggèrent que les changements cognitifs associés au vieillissement ont un effet sur le traitement de l’information spatiale quelle que soit la modalité linguistique utilisée et que l’effet de l’utilisation de la langue des signes sur les processus spatiaux semblent différer entre les signeurs sourds et les signeurs entendants. Discussion. Cette recherche transversale a permis d’étudier pour la première fois l’impact du vieillissement sur les habiletés spatiales des utilisateurs d’une langue des signes. Également, elle explore le facteur potentiellement atténuant de l’utilisation de la langue des signes quant aux effets de l’âge sur la performance à des tâches d’habiletés spatiales. Sur la base des résultats, il est proposé que l’effet de l’utilisation d’une langue des signes sur la cognition spatiale est spécifique aux sous-domaines d’habiletés spatiales (perception spatiale; visualisation spatiale; rotation mentale; prise de perspective), et que l’expérience linguistique, telle que le bilinguisme bimodal, est un facteur d’intérêt dans la relation entre l’utilisation d’une langue des signes et les processus spatiaux. Conclusion. Les résultats rapportés dans la présente thèse seront utiles aux futurs chercheurs intéressés par l’étude de la cognition chez les aînés signeurs. Des recherches futures devraient se poursuivre dans cette direction afin de préciser l’impact du bilinguisme bimodal sur la cognition spatiale à la lumière de ce qui est connu des effets protecteurs du bilinguisme unimodal face au vieillissement. De plus, les recherches futures devraient envisager d’élargir la perspective de l’effet de l’âge sur les habiletés spatiales des signeurs, en tenant compte des données cognitives et linguistiques. Ces recherches pourraient investiguer la cause de la distinction dans le traitement d’informations spatiales sur la production et la compréhension d’une langue des signes. / Introduction. Across the adult lifespan, cognitive abilities change: some tend to decrease with age whereas others are maintained. The results of previous studies have shown that performance on tasks spatial perception, spatial visualization, mental rotation and perspective taking are poorer in older adults than in younger adults. Sociodemographic and behavioral factors may influence the cognitive aging trajectories of older adults. For example, language experience, such as bilingualism, may be a neuroprotective factor contributing to the cognitive reserve. The impact of language experience in another modality, as it is the case for visual-spatial language, on spatial cognition has generated much interest. To date, no research has addressed this issue with regards of the potential effect of longtime use of sign language on the spatial cognition of older signers. Aim. The aim of this thesis is to investigate whether there are differences in spatial abilities among signers (deaf and hearing) and non-signers of different age groups. More specifically, this thesis examined i) if performance on tasks of spatial abilities differs according to age (younger/older) and linguistic experience (deaf signers/hearing signers/hearing non-signers) and ii) if performance differs according to the type of spatial abilities subcomponent targeted (spatial perception; spatial visualization; mental rotation; perspective taking). Methods. To examine the effect of age and linguistic experience on spatial abilities, data were collected from 120 participants: 60 older adults from 65 to 80 years of age (20 deaf signers, 20 hearing signers, 20 hearing non-signers) and 60 young adults ranging in age from 18 to 35 years (20 deaf signers, 20 hearing signers, 20 hearing non-signers). Prior to the experiment, participants were tested for visual and hearing acuity, language proficiency (Quebec Sign Language and French), cognitive health and intelligence. Based on their linguistic experience, the participants were matched on the basis of their educational level as well as their level of intelligence. The four subcomponents of spatial abilities were tested using a battery of seven tests. Results. Consistent with previously published data on the effect of age on spatial abilities, accuracy results revealed that the younger deaf signers constantly performed better than the older deaf signers on all tasks. Results also highlighted a specific advantage of hearing signers over hearing non-signers in terms of accuracy on mental rotation and perspective taking tasks regardless of age. A general advantage of older signers (deaf and hearing) over older non-signers was observed on spatial visualization tasks only. These results suggest that age-related cognitive changes impact the processing of spatial information regardless of the linguistic modality used. Also, the effect of sign language use on spatial processes may differ between deaf signers and hearing signers. Discussion. This cross-sectional research made it possible to investigate for the first time the impact of aging on spatial abilities among sign language users, as well as to explore the potential effect of sign language use with regards to performance on tasks of spatial abilities in an older population. Based on the results, it is proposed that the effect of sign language use is subdomain specific and that language experience such as bimodal bilingualism is a factor of interest in the relation between sign language use and spatial processing. Conclusion. The results reported in the present thesis will be helpful to future researchers interested in investigating aspects of cognition throughout the lifespan of older signers. Future research should be pursued in order to investigate the impact of bimodal bilingualism on spatial cognition in the light of the aging factor. In addition, future research should consider broadening the scope of this research area by examining in detail the interaction between cognitive skills and linguistic modality. Researches could address the effect of the distinction observed between deaf signers and hearing signers in terms of spatial processing and investigate links between spatial processing and sign language production and comprehension.