[pt] Para formar uma percepção unificada do estado do organismo e de suas relações com o meio, o sistema nervoso combina informações de diversas modalidades sensoriais por meio de processos de integração multissensorial. Em algumas ocasiões, dados de diferentes canais sensoriais podem fornecer informações conflitantes sobre um determinado aspecto da realidade, como nos experimentos de desenho guiado por espelho e na ilusão da caixa-espelho, nos quais as estimativas posicionais informadas pela visão e pela propriocepção entram em conflito. Além da contribuição direta dos dados sensoriais para a formação do conflito visual-proprioceptivo, também participa do processo o embodiment, que se refere à sensação subjetiva de possuir e dispor do próprio corpo e de suas partes. Este estudo integrou os paradigmas experimentais da caixa-espelho e do desenho guiado por espelho para examinar se o aprendizado da tarefa de desenho poderia reduzir o conflito visual-proprioceptivo e se essa diminuição se refletiria na tarefa com a caixa-espelho e no embodiment. Os resultados confirmaram o viés posicional produzido pela ilusão da caixa-espelho e indicaram que o aprendizado da tarefa do desenho guiado por espelho pode reduzir o conflito visual-proprioceptivo. Além disso, diferenças significativas entre mulheres e homens foram observadas nos dois experimentos, especialmente na tarefa de desenho, sugerindo diferenças entre os sexos na resolução de conflitos visuais-proprioceptivos pelos processos de integração multissensorial. Por fim, potenciais implicações teóricas e clínicas dos resultados são discutidos brevemente, como por exemplo, a possível participação dos processos perceptuais aqui estudados na etiologia de transtornos alimentares como a bulimia e a anorexia nervosa. / [en] To form a unified and coherent perception of the organism s state and its relationship with the surrounding environment, the nervous system combines information from various sensory modalities through multisensory integration processes. Occasionally, data from two or more sensory channels may provide conflicting information about a particular feature of reality. This is evident in experiments using the mirror-guided drawing task and the mirror-box illusion, where positional estimates informed by vision and proprioception conflict. In addition to the direct contribution of sensory data to the formation of visual-proprioceptive conflict, embodiment plays a crucial role. Embodiment refers to the subjective sensation of possessing and controlling one s own body and its parts. This study integrated the experimental paradigms of the mirror-box and mirror drawing tasks to examine whether learning the mirror drawing task could reduce visual-proprioceptive conflict. The aim was to determine if a reduction induced by the mirror drawing task would be reflected in the mirror-box task. The results confirmed the visual bias produced by the mirror-box illusion and provided evidence that visual-proprioceptive conflict can be reduced by learning the mirror drawing task. Additionally, significant differences were observed between women and men in both experiments, particularly in the drawing task, suggesting sex differences in the experience and resolution of visual-proprioceptive conflicts through multisensory integration processes. Finally, potential theoretical and clinical implications of the results are briefly discussed, including the possibleinvolvement of the perceptual processes studied here in the etiology of eating disorders, such as bulimia and anorexia nervosa.

Die sensorischen und hedonischen Eigenschaften von Essen sind wichtige Einflussfaktoren für die Nahrungsauswahl und –aufnahme. Was macht die Anziehungskraft von Nahrungsreizen aus? Die sensorischen und hedonsichen Eigenschaften von Nahrungsreizen werden mit allen Sinnen, oftmals sogar gleichzeitig, verarbeitet. Nahrungswahrnehmung ist damit ein mutlisensorisches Phänomen. Der Geruch, der Anblick, der Tasteindruck oder Geräusche können bereits vor der Nahrungsaufnahme wahrgenommen werden und Erwartungen hinsichtlich des Geschmacks auslösen. Diese prä-ingestiven Wahrnehmungseindrücke spielen daher auch eine maßgebliche Rolle bei der Entstehung von Verlangen und Gelüsten. Während der Nahrungsaufnahme, beim Kauen und Schlucken, spielen die chemischen Sinne, Schmecken und Riechen, eine besondere Rolle. Der Gesamtsinneseindruck aus den chemischen Sinneskanälen wird auch als Flavor bezeichnet. Wobei angemerkt sein soll, dass auch nicht-chemische Sinne, Sehen, Hören und Tasten, in die Flavordefinition einbezogen werden können. Zweifelsohne stellt die Nahrungsaufnahme ein komplexes Verhalten dar, das perzeptuelle, kognitive und Stoffwechselprozesse gleichermaßen umfasst. Die vorliegende Habilitationsschrift widmet sich der Untersuchung der neurokognitiven Mechanismen der visuellen, gustatorischen und flavour Wahrnehmung von Nahrungsobjekten und umfasst Untersuchungen zur Vulnerabilität der neuronalen Repräsentationen durch kontextuelle Reize. Zusammenfassend schließt die Arbeit mit der Feststellung, dass ein umfassendes Verständnis der psychophysiologischen Mechanismen der sensorischen und hedonischen Verarbeitung von Nahrungsreizen über alle Sinne die perzeptuelle Grundlage für nahrungsbezogenes Urteilen und Entscheiden darstellt. / What characterizes food and makes it so tempting? Sensory and hedonic information about food is conveyed by all senses, activated more or less simultaneously, having led to the notion that food perception is a multisensory experience. The smell, sight, touch or sound of a food can be experienced before ingestion and elicit expectations about the "taste" of that food based on previous encounters. It is, therefore, not surprising that these so-called pre-ingestive sensory experiences play a role in the formation of cravings and the elicitation of appetitive responses. Only during consumption, the chemical senses, smell, taste and oral touch and irritation, are experienced in the oral cavity as food is masticated and swallowed and gives rise to the overall experience commonly referred to as taste. While the term taste is, strictly speaking, incorrect as it does not refer to the gustatory perception, many languages including German lack an appropriate term for the holistic flavor experience arising from the food-induced stimulation of the chemical senses, gustation, olfaction and oral somatosensation in a minimalist interpretation, or, in a broader sense, of all our senses, including hearing and vision. Undoubtedly, feeding behavior is characterized by a complex interplay of perceptual, cognitive and metabolic processes and research on the mechanisms by which these processes regulate food intake behavior is only in its infancy. In this thesis, I present a series of studies aiming to elucidate the cortical representations of the visual, gustatory and flavor components of food objects along with evidence for the vulnerability of these presentations to contextual information. Together, I reckon that an understanding of the psychophysiological mechanisms of the sensory and affective processing of food objects mediated by our senses, seeing, smelling, tasting, feeling and hearing, represents the perceptual basis of food-related decision making.

Thèse de doctorat réalisé en cotutelle avec l'Université catholique de Louvain, Belgique (Faculté de médecine, Institut de Neuroscience) / Percevoir et synchroniser ses mouvements à une pulsation régulière en musique est une capacité largement répandue chez l’Homme, et fondamentale aux comportements musicaux. La pulsation et la métrique en musique désignent généralement une organisation temporelle périodique perçue à partir de stimuli acoustiques complexes, et cette organisation perceptuelle implique souvent une mise en mouvement périodique spontanée du corps. Cependant, les mécanismes neuraux sous-tendant cette perception sont à l’heure actuelle encore méconnus. Le présent travail a donc eu pour objectif de développer une nouvelle approche expérimentale, inspirée par l’approche électrophysiologique des potentiels évoqués stationnaires, afin d’explorer les corrélats neuraux à la base de notre perception de la pulsation et de la métrique induite à l’écoute de rythmes musicaux. L’activité neurale évoquée en relation avec la perception d’une pulsation a été enregistrée par électroencéphalographie (EEG) chez des individus sains, dans divers contextes : (1) dans un contexte d’imagerie mentale d’une métrique appliquée de manière endogène sur un stimulus auditif, (2) dans un contexte d’induction spontanée d’une pulsation à l’écoute de patterns rythmiques musicaux, (3) dans un contexte d’interaction multisensorielle, et (4) dans un contexte de synchronisation sensorimotrice. Pris dans leur ensemble, les résultats de ces études corroborent l’hypothèse selon laquelle la perception de la pulsation en musique est sous-tendue par des processus de synchronisation et de résonance de l’activité neurale dans le cerveau humain. De plus, ces résultats suggèrent que l’approche développée dans le présent travail pourrait apporter un éclairage significatif pour comprendre les mécanismes neuraux de la perception de la pulsation et des rythmes musicaux, et, dans une perspective plus générale, pour explorer les mécanismes de synchronisation neurale. / The ability to perceive a regular beat in music and synchronize to it is a widespread human skill. Fundamental to musical behavior, beat and meter refer to the perception of periodicities while listening to musical rhythms, and usually involve spontaneous entrainment to move on these periodicities. However, the neural mechanisms underlying entrainment to beat and meter in Humans remain unclear. The present work tests a novel experimental approach, inspired by the steady-state evoked potential method, to explore the neural dynamics supporting the perception of rhythmic inputs. Using human electroencephalography (EEG), neural responses to beat and meter were recorded in various contexts: (1) mental imagery of meter, (2) spontaneous induction of a beat from rhythmic patterns, (3) multisensory integration, and (4) sensorimotor synchronization. Our results support the view that entrainment and resonance phenomena subtend the processing of musical rhythms in the human brain. Furthermore, our results suggest that this novel approach could help investigating the link between the phenomenology of musical beat and meter and neurophysiological evidence of a bias towards periodicities arising under certain circumstances in the nervous system. Hence, entrainment to music provides an original framework to explore general entrainment phenomena occurring at various levels, from the inter-neural to the inter-individual level.

Les troubles du spectre autistique (TSA) sont actuellement caractérisés par une triade d'altérations, incluant un dysfonctionnement social, des déficits de communication et des comportements répétitifs. L'intégration simultanée de multiples sens est cruciale dans la vie quotidienne puisqu'elle permet la création d'un percept unifié. De façon similaire, l'allocation d'attention à de multiples stimuli simultanés est critique pour le traitement de l'information environnementale dynamique. Dans l'interaction quotidienne avec l'environnement, le traitement sensoriel et les fonctions attentionnelles sont des composantes de base dans le développement typique (DT). Bien qu'ils ne fassent pas partie des critères diagnostiques actuels, les difficultés dans les fonctions attentionnelles et le traitement sensoriel sont très courants parmi les personnes autistes. Pour cela, la présente thèse évalue ces fonctions dans deux études séparées. La première étude est fondée sur la prémisse que des altérations dans le traitement sensoriel de base pourraient être à l'origine des comportements sensoriels atypiques chez les TSA, tel que proposé par des théories actuelles des TSA. Nous avons conçu une tâche de discrimination de taille intermodale, afin d'investiguer l'intégrité et la trajectoire développementale de l'information visuo-tactile chez les enfants avec un TSA (N = 21, âgés de 6 à18 ans), en comparaison à des enfants à DT, appariés sur l’âge et le QI de performance. Dans une tâche à choix forcé à deux alternatives simultanées, les participants devaient émettre un jugement sur la taille de deux stimuli, basé sur des inputs unisensoriels (visuels ou tactiles) ou multisensoriels (visuo-tactiles). Des seuils différentiels ont évalué la plus petite différence à laquelle les participants ont été capables de faire la discrimination de taille. Les enfants avec un TSA ont montré une performance diminuée et pas d'effet de maturation aussi bien dans les conditions unisensorielles que multisensorielles, comparativement aux participants à DT. Notre première étude étend donc des résultats précédents d'altérations dans le traitement multisensoriel chez les TSA au domaine visuo-tactile. Dans notre deuxième étude, nous avions évalué les capacités de poursuite multiple d’objets dans l’espace (3D-Multiple Object Tracking (3D-MOT)) chez des adultes autistes (N = 15, âgés de 18 à 33 ans), comparés à des participants contrôles appariés sur l'âge et le QI, qui devaient suivre une ou trois cibles en mouvement parmi des distracteurs dans un environnement de réalité virtuelle. Les performances ont été mesurées par des seuils de vitesse, qui évaluent la plus grande vitesse à laquelle des observateurs sont capables de suivre des objets en mouvement. Les individus autistes ont montré des seuils de vitesse réduits dans l'ensemble, peu importe le nombre d'objets à suivre. Ces résultats étendent des résultats antérieurs d'altérations au niveau des mécanismes d'attention en autisme quant à l'allocation simultanée de l'attention envers des endroits multiples. Pris ensemble, les résultats de nos deux études révèlent donc des altérations chez les TSA quant au traitement simultané d'événements multiples, que ce soit dans une modalité ou à travers des modalités, ce qui peut avoir des implications importantes au niveau de la présentation clinique de cette condition. / Autism spectrum disorders (ASD) are currently characterized by a triad of impairments including social dysfunction, communication deficits and perseverative behaviours. The simultaneous integration of multiple senses is crucial in everyday life as it allows for the creation of a unified percept. Similarly, the allocation of attention to multiple events at the same time is critical in the processing of dynamic environmental information. In daily interactions with the environment, both sensory processing as well as attentional functions are building blocks to typical development (TD). Although not part of the current diagnostic criteria, difficulties with attention functions and sensory processing are very common among autistic persons. The present thesis therefore examined both these functions in two separate studies. The first study is based on the premise that alterations in basic sensory processing might underlie atypical sensory behaviours in ASD, as proposed by current theories of ASD. We conceived a cross-modal size discrimination task to assess the integrity and developmental course of visuo-tactile information in children with ASD (N = 21, aged 6-18 years), compared to age- and performance IQ-matched children with TD. In a simultaneous two-alternative forced-choice task, participants were asked to make a judgement on the size of two stimuli, based on unisensory (visual or tactile) or multisensory (visuo-tactile) inputs. Difference thresholds evaluated the smallest difference at which participants were capable to discriminate size. Children with ASD showed diminished performance and no maturational effects in both unisensory and multisensory conditions, compared to TD participants. Our first study therefore extends previous results of alterations in multisensory processing in ASD to the visuo-tactile domain. In our second study, we evaluated 3D-Multiple Object Tracking (3D-MOT) capacities in autistic adults (N = 15, aged 18-33 years), compared to age- and IQ-matched control participants, who were asked to track one or three moving targets amongst a set of distracters in a virtual reality environment. Performances were measured based on speed thresholds, which evaluates the greatest speed at which observers are capable of successfully tracking moving objects. Autistic individuals displayed overall reduced speed thresholds, whatever the number of spheres to track. These findings extend previous results of altered attention mechanisms in autism with regards to the simultaneous allocation of attention to multiple areas. Together, the findings of our two studies reveal alterations in ASD with regards to the processing of multiple events at the same time, be it within one modality or across modalities, which may have important implications for the clinical presentation of this condition.

La vision joue un rôle très important dans la prévention du danger. La douleur a aussi pour fonction de prévenir les lésions corporelles. Nous avons donc testé l’hypothèse qu’une hypersensibilité à la douleur découlerait de la cécité en guise de compensation sensorielle. En effet, une littérature exhaustive indique qu’une plasticité intermodale s’opère chez les non-voyants, ce qui module à la hausse la sensibilité de leurs sens résiduels. De plus, plusieurs études montrent que la douleur peut être modulée par la vision et par une privation visuelle temporaire. Dans une première étude, nous avons mesuré les seuils de détection thermique et les seuils de douleur chez des aveugles de naissance et des voyants à l’aide d’une thermode qui permet de chauffer ou de refroidir la peau. Les participants ont aussi eu à quantifier la douleur perçue en réponse à des stimuli laser CO2 et à répondre à des questionnaires mesurant leur attitude face à des situations douloureuses de la vie quotidienne. Les résultats obtenus montrent que les aveugles congénitaux ont des seuils de douleur plus bas et des rapports de douleur plus élevés que leurs congénères voyants. De plus, les résultats psychométriques indiquent que les non-voyants sont plus attentifs à la douleur. Dans une deuxième étude, nous avons mesuré l’impact de l'expérience visuelle sur la perception de la douleur en répliquant la première étude dans un échantillon d’aveugles tardifs. Les résultats montrent que ces derniers sont en tous points similaires aux voyants quant à leur sensibilité à la douleur. Dans une troisième étude, nous avons testé les capacités de discrimination de température des aveugles congénitaux, car la détection de changements rapides de température est cruciale pour éviter les brûlures. Il s’est avéré que les aveugles de naissance ont une discrimination de température plus fine et qu’ils sont plus sensibles à la sommation spatiale de la chaleur. Dans une quatrième étude, nous avons examiné la contribution des fibres A∂ et C au traitement nociceptif des non-voyants, car ces récepteurs signalent la première et la deuxième douleur, respectivement. Nous avons observé que les aveugles congénitaux détectent plus facilement et répondent plus rapidement aux sensations générées par l’activation des fibres C. Dans une cinquième et dernière étude, nous avons sondé les changements potentiels qu’entrainerait la perte de vision dans la modulation descendante des intrants nociceptifs en mesurant les effets de l’appréhension d’un stimulus nocif sur la perception de la douleur. Les résultats montrent que, contrairement aux voyants, les aveugles congénitaux voient leur douleur exacerbée par l’incertitude face au danger, suggérant ainsi que la modulation centrale de la douleur est facilitée chez ces derniers. En gros, ces travaux indiquent que l’absence d’expérience visuelle, plutôt que la cécité, entraine une hausse de la sensibilité nociceptive, ce qui apporte une autre dimension au modèle d’intégration multi-sensorielle de la vision et de la douleur. / Vision is important for avoiding encounters with objects in the environment that may imperil physical integrity. Since pain also plays a major role in preventing bodily injury, we tested whether, in the absence of vision, pain hypersensitivity would arise from an adaptive shift to other sensory channels. Indeed, a wealth of literature indicates that blindness leads to sensory compensation and crossmodal plasticity. Furthermore, studies have shown that pain perception can be modulated by vision and by temporary visual deprivation. In a first study, we measured innocuous and noxious thermal thresholds using a Peltier-based thermotester in congenitally blind and normal sighted participants. We also assessed their suprathreshold pain ratings using a CO2 laser device and evaluated their attitude towards daily pain encounters using questionnaires on attention and anxiety. Results show that congenitally participants have lower pain thresholds and higher suprathreshold pain ratings. The psychometric data further indicates that they are more attentive to pain compared to their sighted peers. In a second study, we investigated whether visual experience has an impact on pain perception by replicating the first study in late blind participants. Results indicate that individuals who lost sight later in life are similar to the sighted in every aspect of pain perception that we measured. In a third study, we tested whether blind individuals have supranormal skills in detecting small and quick increases in temperature, as these thermal cues of the environment might help identifying and avoiding potentially harmful objects. Results show that congenitally blind participants outperform their sighted peers and that they are more susceptible to spatial summation of heat. In a fourth study, we examined the contribution of A∂ and C-fibres to blind individuals’ nociceptive processing, as these fibres are thought to signal the first and second pain, respectively. Our findings indicate that congenital blindness leads to an enhanced detection to C-fibre mediated sensations and to faster reaction times to these nociceptive inputs. In a fifth and final study, we probed the potential changes in the descending modulation of nociceptive inputs following visual deprivation by measuring the effects of psychological factors like anticipation and anxiety on blind individuals’ pain perception. Results show that congenitally blind participants are more sensitive to pain in response to uncertainty about threat, suggesting that they are more susceptible to top-down modulation of pain. Overall, this work indicates that visual deprivation from birth, but not later in life, causes a leftward shift in the stimulus–response function to nociceptive stimuli and lends new support to a model of sensory integration of vision and pain processing.

La kinesthésie chez l’Homme repose sur le traitement des multiples informations sensorielles générées au cours de l’action. Notre démarche expérimentale vise à évaluer l’apport respectif des sensibilités proprioceptive musculaire, tactile et visuelle à la perception des mouvements du corps. Utilisant des leurres sensoriels capables de créer des illusions kinesthésiques, nous recherchons, lors d'approches psychophysiques et en neuroimagerie, les règles et aires cérébrales impliquées dans la fusion multisensorielle. Ce travail confirme que chacune des trois modalités véhicule des informations pertinentes pour le système nerveux central (SNC), qui se combinent différemment selon la vitesse du mouvement et les modalités en présence. Tact et vision véhiculent des informations cinématiques redondantes, complémentaires de la proprioception, relatives aux mouvements du corps dans son environnement. Elles semblent plus fiables pour coder des mouvements lents (Blanchard et al., 2011, 2013). L'IRMf met en lumière un réseau de convergence hétéromodal de perception d’un mouvement de la main et confirme que les régions pariéto-cérebello-insulaires sont le siège de processus d'intégration supramodaux. En combinant trois signaux sensoriels différents, ce travail fournit la preuve originale de leur intégration à différents niveaux du SNC, des aires primaires, jusqu’aux aires supérieures du traitement de l’information. Rappelant le modèle de "Modality Appropriateness" de Welch & Warren (1986), nos résultats soutiennent l'idée d'une pondération des entrées, optimisant la kinesthésie, en fonction de leur relative pertinence à coder un évènement donné. / Human kinesthesia is based on the processing of a great amount of sensory information available during action. To assess the respective contribution of muscle proprioception, vision and touch of self-movement perception, our experimental approach relies on sensory lures likely to generate illusory sensations of movement. In psychophysics and functional neuroimaging (fMRI) experimental setting, we try to better understand how and where this "multisensory fusion" occurs. This work confirms that each modality conveys kinesthetic information relevant for the central nervous system (CNS), is combined in a non-equivalent way according to the velocity of encoded movement and sensory modalities involved. Tact and vision seem to provide redundant cinematic information about body movements relatively to environment, complementary to muscle proprioceptive signals and seem to be more reliable for coding small velocities (Blanchard et al., 2011, 2013). Our neuroimaging results highlight a heteromodal network involved during kinesthesia and confirms that a supramodal insulo-cerebello-parietal region is the substrate for trisensory integration processing. By combining three kinesthetic signals from different sensory origins, this work provides evidence of integration at different levels of the CNS. Recalling the "Modality Appropriateness" model of Welch & Warren (1986), our results also support the idea of a weighted integration of sensory inputs, which would optimize kinesthesia, based on their relative relevance to encode a given event.

A prerequisite in today´s society is to be able to read and write in order to be able to develop fully into a participant community citizen. The aim of the Swedish curriculum is for the pupils to learn to read and write so that they can benefit from the education (Skolverket, 2011a). The school should be able to meet all children´s differences and needs to fulfill this. Several research studies have shown that the earlier the pupils in the risk zone for reading difficulties are identified and the earlier cost-effective reading interventions are implemented the lower the risk of school failure. The purpose of this study was to analyze whether a specific teaching package supports the development of pupil´s knowledge of letters, letter sounds and word decoding. In addition, the pupil´s experiences of participation in the reading intervention were studied. The study included seven pre-school class pupils who were at risk for reading difficulties, they were randomized into a experimentgroup of four and a controlgroup of three pupils. When collecting data, both quantitative and qualitative methods were used. The pupils conducted a pre- and posttest in the form of the Swedish National Agency for Education´s mapping material for the preschool class (Skolverket, 2018). In addition, observation of the reading data sessions and interviews with the pupils were used after this was completed. As far as the measurable results about the pupil´s knowledge development were concerned there was a positive result, but it is not possible to draw any conclusions about the impact of the reading intervention.  Regarding the pupil´s experiences of the reading intervention they were positive to both the participation and reading. One conclusion we draw from this is that the playful element of the reading intervention together with the multisensory supplement probably contributed to the pupil´s finding it both joyful and motivating. From a special educational perspective early reading intervention enables inclusion and participation. / En förutsättning för att kunna utvecklas till en delaktig samhällsmedborgare är att kunna läsa och skriva. Ett övergripande mål i läroplanen är att eleverna tillägnar sig skriftspråket vilket är ett medel för att kunna tillgodogöra sig utbildningen (Skolverket, 2011a). Skolan ska kunna möta alla barns olikheter så att de får den undervisning och det stöd de behöver för att kunna erövra och utveckla läs- och skrivförmågan. Flera studier har visat att ju tidigare eleverna i riskzonen för lässvårigheter identifieras och ju tidigare kostnadseffektiva läsinsatser genomförs, desto mindre risk för framtida skolmisslyckanden. Syftet med denna studie var att analysera huruvida ett specifikt undervisningspaket stöder utvecklingen av elevernas kunskaper om bokstäver, ljud och ordavkodning. Dessutom studerades elevernas erfarenheter av deltagande i läsinsatsen. Studien omfattade sju förskoleelever som bedömdes vara i riskzonen för lässvårigheter vilka bildade en experimentgrupp om fyra elever och en kontrollgrupp om tre elever. Vid insamling av data användes både kvantitativa och kvalitativa metoder. Skolverkets kartläggningsmaterial för förskoleklassen (Skolverket, 2018) användes som för- och eftertest. Dessutom gjordes observationer av läsinsatsen samt elevintervjuer efter avslutad läsinsatsperiod. De mätbara resultaten kring elevernas kunskapsutveckling visade ett positivt resultat, men det gick inte att dra några slutsatser kring undervisningspaketets effektivitet. Utifrån resultatet kring elevernas upplevelser av läsinsatsen fann vi att eleverna var positiva till både läsinsatsen och läsning. En slutsats vi drar av detta är att det lekfulla inslaget i läsinsatsen tillsammans med det multisensoriska tillägget förmodligen har bidragit till att eleverna tyckte att det både var lustfyllt och motiverande. Ur ett specialpedagogiskt perspektiv är det angeläget med tidiga insatser som kan göra eleverna läsförberedda och därmed öka chansen till inkludering och delaktighet.

A pesquisa relatada visa responder à questão: a arte pictórica é acessível ao cego?. Assim, a presente dissertação trata da fidelidade do entendimento tátil do cego e das imagens criadas em seu imaginário através da leitura tátil e reprodução por meio de suporte adaptado. Relata e discorre a respeito de como essas imagens são criadas por meio da multissensorialidade e a possibilidade da produção artística. / This research is aimed at answering the question? Is pictorial art accessible to the blind Thus, this dissertation covers the accuracy of the tactile understanding of the blind, and of the images created in his/her imagination through the tactile reading and reproduction by an adapted support. It describes and analyses how these images are created by multisensoriality and the possibility of artistic production.

Introdução: A demência é causada pela disfunção e morte das células cerebrais e por seu caráter progressivo, os sujeitos podem desenvolver perdas da capacidade funcional, prejuízo cognitivo, sintomas neuropsiquiátricos, dificultando a abordagem terapêutica com recursos não farmacológicos. A estimulação multissensorial dos sentidos primários tem se mostrado promissora como forma de tratamento complementar para os sintomas comportamentais e psicológicos da demência. Objetivo: Investigar os efeitos da estimulação multissensorial (MSE) sobre idosos com demência em fase moderada e grave em relação às alterações comportamentais, humor e interação com o ambiente multissensorial e institucional, quando comparado a um grupo controle não submetido às intervenções MSE. Materiais e Método: Trata-se de um estudo de intervenção, controlado, não randomizado, paralelo, mascaramento aberto, quase experimental, de caráter quantitativo e qualitativo, do tipo exploratório. Amostra: 20 idosos, média de idade de 83 anos, 17 mulheres e 3 homens, média de 3 anos de escolaridade, com diagnóstico de demência moderada ou grave e residentes há cerca de 4 anos em uma instituição de longa permanência para idosos (ILPI) na cidade de Ribeirão Preto. Instrumentos de Avaliação: Mini Exame do Estado Mental; Índice de Katz; Escala Cornell de depressão em demência; Inventário Neuropsiquiátrico; Registro de Observação no Ambiente Institucional; Registro de Observação no Ambiente Multissensorial. Fase de Seleção: definição da amostra por conveniência e avaliação dos idosos no período pré-intervenção. Fase de Intervenção: amostra separada em dois grupos. Grupo de Intervenção (GI): 10 idosos que participaram de um programa de estimulação multissensorial (PEM) composto por 24 sessões durante três meses, duas vezes por semana e trinta minutos de duração, em sala multissensorial organizada para este fim. Grupo Controle (GC): 10 idosos que não participaram do PEM. Fase Pós Intervenção: reavaliação da amostra após o término do programa (três meses). Análise dos dados: estatística descritiva, uso dos testes não paramétricos de Postos Sinalizados de Wilcoxon e Mann-Whitney para os instrumentos padronizados e Análise de Conteúdo pela técnica de Bardin para os registros de observação. Resultados: Observou-se no ambiente multissensorial: promoção de efeitos relaxantes ou excitantes; sensação de bem estar e emoções positivas; realização de escolhas a determinados recursos; favorecimento de habilidades cognitivas (manutenção da atenção, memória de longo prazo, percepção) e alteração da pressão arterial e frequência cardíaca durante a sessão. O GI quando comparado ao GC, obteve após o PEM: redução das alterações comportamentais e melhor desempenho cognitivo. Os cuidadores também referiram que GI apresentou comportamento engajado, humor neutro, melhor comunicação verbal e maior interação com o ambiente institucional durante o período de intervenção. Discussão: Este estudo teve como potencialidades o baixo custo de implantação de uma sala multissensorial, abranger idosos de baixa escolaridade com estágios moderado e grave de demência e estudar os efeitos comportamentais sobre esses sujeitos. As práticas de saúde e assistenciais realizadas nas ILPIs devem considerar a individualidade do idoso com demência, suas preferências sensoriais e interesses. Conclusão: A estimulação multissensorial se mostrou promissora no tratamento complementar da demência, como alternativa não farmacológica no manejo de sintomas neuropsiquiátricos em ambientes institucionais. / Introduction: Dementia is caused by the brain cells progressive dysfunction and death; the affected subjects may develop functional capacity losses, cognitive impairment and neuropsychiatric symptoms. This may hinder therapeutic approaches with non-pharmacological resources. Primary senses multisensory stimulation shows promise as a complementary treatment for the behavioral and psychological symptoms of dementia. Objective: To investigate the effects of multisensory stimulation (MSE) on the elderly with moderate to severe dementia in related to behavioral changes, mood and interaction with the sensory and institutional environment, when compared to a control group not submitted to MSE interventions. Materials and Method: This study is an interventional, controlled, non-randomized, parallel, open-label, quasi-experimental, quantitative and qualitative nature and exploratory clinical trial. Sample: 20 elderly, in average 83 years old; 17 women and 3 men; schooling average was 3 years; diagnosed with moderate or severe dementia and have been institutionalized for about 4 years in a nursing home in the city of Ribeirão Preto. Assessment Tools: Mini-Mental State Examination; Katz Index; Cornell Scale for Depression in Dementia; Neuropsychiatric Inventory-Questionnaire; Observation Record in the Institutional Environment; Observation Record in the Multisensory Environment. Selection Phase: the sample was defined by convenience and the elderly were evaluated in the pre-intervention period. Intervention Phase: the sample was separated in two groups. Intervention Group (IG): 10 elderly who participated in a multisensory stimulation program (PEM). It consisted on 24 sessions of 30 minutes, twice a week, during this three-month period, in a multisensory room organized for this purpose. Control Group (CG): 10 elderly who did not participate in PEM. Post-intervention phase: re-evaluation of the sample after the end of the three month program. Data analysis: descriptive statistics, use of non-parametric tests (Wilcoxon signed-rank test and Mann-Whitney test) for the standardized instruments, and Content Analysis using the Bardin technique for the observation records. Results: In the multisensory environment it was observed: relaxing or exciting effects, feeling of well-being and positive emotions, incentive to autonomy and preferences for certain resources, favored cognitive abilities (attention maintenance, long-term memory, perception) and change in blood pressure and heart rate during the session. In the IG reduction of the behavioral changes and better cognitive performance it was observed, when compared to the CG, after the PEM. Caregivers also reported that IG had engaged behavior, neutral mood, better verbal communication and greater interaction in the institutional environment during the intervention period. Discussion: The potential of this study was the low cost of implanting a multisensory room, to include elderly with schooling low levels, diagnosed with moderate or severe dementia stages and to study the behavioral effects on these subjects. The health and care practices carried out at nursing homes should consider the individuality of the elderly with dementia, their sensory preferences and interests. Conclusion: Multisensory stimulation has shown promise as a complementary treatment of dementia as a non-pharmacological alternative in the management of neuropsychiatric symptoms in nursing homes.

Les constructeurs automobiles proposent un vaste éventail de fonctions secondaires à la conduite, en relation avec le GPS, la musique, ou encore la ventilation. L'ensemble de ces fonctions est centralisé sur un écran accessible au centre de l'habitacle, équipé d'une dalle tactile dans nombre de véhicules récents. Cependant, leur manipulation en conduite peut se révéler périlleuse : la sollicitation de la modalité visuelle pour interagir avec l'interface peut entraîner une baisse de vigilance vis-à-vis de la tâche de conduite, ce qui peut mener à des situations dangereuses. Au cours de cette thèse, fruit d'une collaboration entre le Groupe PSA et le laboratoire PRISM, nous nous sommes attachés à proposer une association de gestes et de sons comme alternative à une sollicitation visuelle. Le but est de proposer des interactions réalisables en aveugle, pour permettre au conducteur de focaliser ses yeux sur la route. Pour réaliser conjointement une manipulation de l'interface et une tâche de conduite, une sollicitation multisensorielle peut en effet permettre de faire baisser la charge mentale du conducteur, en comparaison à une situation unimodale visuelle. Pour que le lien entre les gestes et les sons paraisse naturel, un objet virtuel a été introduit, manipulable grâce à des gestes. Cet objet est le support des stratégies de sonification, par analogie aux sons de notre environnement, qui sont la conséquence d'une action sur un objet. L'objet virtuel permet également de structurer différents gestes autour d'une même métaphore, ou encore de redéfinir le menu d'une interface. La première partie de cette thèse est consacrée à la mise au point de stratégies de sonification pour transmettre des informations pertinentes sur la dynamique de l'objet virtuel. Deux expériences perceptives ont été mises en place, qui ont conduit à la discrimination de deux stratégies de sonification intéressantes. Dans une deuxième partie, nous avons œuvré à la mise en situation automobile par un travail sur les stimuli sonores, sur l'interface, et par l'étude de l'intégration multisensorielle. Un design des stratégies de sonification a été proposé pour permettre de se projeter dans une utilisation en véhicule. Par la suite, les évocations provoquées par le couplage des gestes et des sons ont été au centre d'une troisième expérience perceptive. Cette étude a été effectuée en aveugle, où le concept d'objet virtuel était inconnu et découvert progressivement par les sujets. Ces images mentales véhiculées par les stratégies de sonification peuvent en effet être utiles lors de la familiarisation des utilisateurs avec l'interface. Une quatrième expérience perceptive s'est concentrée sur la prise en main de l'objet virtuel, où l'intégration des stimuli visuels et auditifs a été étudiée, dans le contexte du maniement d'une interface. Les sujets ont été placés dans des conditions similaires à la découverte de l'interface en véhicule à l'arrêt, avec des stimuli audio-visuels ; puis à son utilisation en aveugle grâce aux stratégies de sonification. Les enseignements de ces expériences ont permis de bâtir une interface gestuelle, qui a été comparée à une interface tactile dans une dernière expérience perceptive réalisée en simulateur de conduite. Bien que les résultats montrent une utilisation plus performante de l'interface tactile, l'association des gestes et des sons semble intéressante du point de vue de la charge cognitive des conducteurs. L'interface gestuelle peut donc offrir une alternative prometteuse ou un complément aux interfaces tactiles pour une utilisation simultanée à la conduite en toute sécurité. / Car manufacturers offer a wide range of secondary driving controls, such as GPS, music, or ventilation, often localized on a central touch-sensitive screen. However, operating them while driving proves to be unsafe: engaging the sense of sight for interface interaction can lead to vigilance reduction towards the driving task, which can lead to high-risk situations. In this PhD thesis, which is a part of a collaborative research project involving both the PSA Group and the PRISM laboratory, we aim to provide a gesture and sound association as an alternative to the visual solicitation. The goal is to enable blind interface interactions, allowing the driver to focus their eyes on the road. When jointly performing interface manipulations and the driving task, a multisensory solicitation can lower the driver's cognitive load, in comparison with a visual unimodal situation. For the gesture-sound association to feel more natural, a virtual object that can be handled with gestures is introduced. This object is the support for sonification strategies, constructed by analogy with sounds from our environment, which are the consequence of an action on an object .The virtual object also allows to structure different gestures around the same metaphor, or to redefine the interface's menu. The first part of this thesis deals with the development of sonification strategies, with the aim to inform users about the virtual object dynamic. Two perceptual experiments were set up, which led to the discrimination of two valuable sonification strategies. In a second part, the automotive application was addressed by designing new sound stimuli, the interface, and by studying the multisensory integration. Sounds were proposed for each of the two sonification strategies, to progress towards an in-vehicle integration. The evocations brought by the gestures and sounds association were the subject of a third perceptive blinded experiment. The concepts around the virtual object were unknown and gradually discovered by the subjects. These mental images conveyed by the sonification strategies can help users familiarize with the interface. A fourth perceptual experiment focused on the virtual object handling for first-time users, where the integration of audio-visual stimuli was studied, in the context of an interface manipulation. The experiment conditions were similar to the driver first discovering of the interface in a parked vehicle thanks to audio-visual stimuli, and then operating it through sonification strategies only. The results of this experiment lead to the design of a gestural interface, which was compared with the results obtained with a touchscreen interface in a final perceptual experiment, carried out in a driving simulator. Although the results show better performances for the tactile interface, the combination of gestures and sounds proved to be effective from the cognitive load point of view. The gesture interface can therefore offer a promising alternative or complement to tactile interfaces for a safe simultaneous use in driving condition.