[pt] Este trabalho analisa a produção escrita de aprendizes de inglês-língua estrangeira com o objetivo de descrever a interação que estes aprendizes estabelecem com textos multimodais (TM), em atividades que visam ao exercício de escrita associado a letramento visual e conscientização sobre gêneros textuais. Três áreas de pesquisa forneceram embasamento teórico para o estudo: multimodalidade, aprendizagem multimídia e ensino baseado em gêneros. Estudos em análise de imagens (Kress & Van Leeuwen, 1996; Rose, 2001) forneceram elementos para a elaboração de um modelo voltado para a sala de aula de língua estrangeira. A teoria da aprendizagem multimídia, postulada por Mayer (2001), apresentou-se como suporte para a combinação verbal/visual no ensino da escrita. O conceito de gênero como ação social (Miller, 1994; Bazerman, 1997, 2005) direcionou as atividades para uma introdução a gêneros textuais. Os dados compreendem os textos escritos por três alunos adultos em três atividades de escrita com propósitos distintos e diferentes tipos de imagem/TM: capa de revista com fotografia, anúncio de publicidade com fotografia e ilustração no livro didático. O material analisado inclui também a gravação de duas das análises em sala de aula e questionários respondidos posteriormente às atividades. A análise buscou evidências no texto escrito e no discurso do aprendiz em relação a: (1) interação com a imagem/TM: percepção (Aumont, 1990), dependência e aproveitamento dos elementos representados, através da análise da configuração tópica do texto (Brown & Yule, 1983) e das respostas aos questionários; (2) oportunidades de aprendizagem visando enriquecimento lexical e a conscientização sobre gênero textual; (3) o conhecimento tácito do gênero textual e a influência deste e do contexto macro na interação do aprendiz com a imagem/TM. Os resultados das análises sugerem, entre outros pontos, que (1) a dependência da imagem/TM tem relação com o grau de dificuldade sentido pelo aprendiz ao escrever seu texto; (2) o gênero textual selecionado para a atividade de escrita influencia fortemente a leitura e o aproveitamento que este aprendiz faz dos recursos visuais e verbais da imagem/TM e (3) a análise de imagens/TM pode enriquecer a sala de aula, levando o aprendiz a exercitar seu letramento visual. O conhecimento sobre a aprendizagem multimodal pode contribuir para a elaboração de materiais de ensino voltados para o exercício da escrita em ILE. / [en] This study analyses the written production of EFL learners with the purpose of describing how these learners interact with multimodal texts (MT) in writing tasks whose aims are the development of writing skills, visual literacy and genre awareness. Three areas of research served as the basis for the study: multimodality, multimedia learning and genre-based teaching. Studies of visual language (Kress & Van Leeuwen, 1996; Rose, 2001) provided the elements for a model of analysis to be used in language teaching classes. The multimedia learning theory, conceived by Mayer (2000), grounded the examination of the verbal/visual combination in the teaching of writing. The idea of genre as social action (Miller, 1994; Bazerman, 1997, 2005) guided the activities designed for genre awareness. The data include the texts written by three adult learners in tasks with specific pedagogical purposes and different types of images/MT: a magazine cover with a photograph, an advertisement with a photograph and a textbook illustration. It also includes the recorded material of two of the oral analyses in class and questionnaires completed by the students after the writing task. The analysis looked for evidence in the written texts and in the learners’ discourse concerning: (1) interaction with the image/MT: perception, dependence and use of the represented elements, through the analysis of the topic framework of the text (Brown & Yule, 1983) and the learners’ responses to the questionnaires; (2) learning opportunities focusing on lexical improvement and genre awareness; (3) tacit knowledge of the genre and its influence, as well as the influence of the macro context on the learners’ interaction with the image/MT. Some of the findings suggest that (1) dependence on the image/MT is closely related to the learner’s writing ability; (2) the genre selected for the activity strongly influences the learners’ responses and their use of the visual and verbal resources of the image/MT, and (3) multimodal text analysis can enrich the foreign language class, motivating learners to exercise their visual literacy. The knowledge of multimodal learning can contribute to the design of materials for the teaching of writing.

[pt] O problema central desta tese está no letramento de alunos surdos, o que levou à reflexão sobre a constituição do pensamento através de signos e seus possíveis significados construídos socialmente. Faz-se a tentativa de preencher a lacuna apontada por Lebedeff (2010) sobre quais seriam as práticas pedagógicas advindas da necessidade discursiva da experiência visual da surdez e a quais eventos de letramento visual se referem esses discursos. Os objetivos específicos da pesquisa foram os seguintes: 1. Identificar as características das práticas pedagógicas dos instrutores surdos em atuação nas escolas-piloto de educação bilíngue no município do Rio de Janeiro; 2. Analisar as inter-relações entre as práticas pedagógicas dos instrutores surdos com o letramento visual ou o uso de recursos apoiados em imagens. 3. Caracterizar as práticas pedagógicas negociadas com o professor (ouvinte) junto ao instrutor surdo. Contudo, verificamos que há outras práticas que estão ocorrendo diante de fatores, tais como a forte tendência autobiográfica do surdo, manifesta na construção de narrativas surdas em uma linguagem própria, o que envolve não somente a língua de sinais ou língua escrita (portuguesa). Para a compreensão das negociações de sentido, parte-se para a linguagem de interações que é fator fundamental à compreensão da comunicação e da sociabilidade; estas não se concretizam somente por meios e suportes, mas também mediada por interpretações, anseios e conflitos. Diante dessa perspectiva, consideramos que os surdos encontram-se em um processo de desequilíbrio ritual e abordamos os jogos de interação em uma linguagem goffmaniana (1981, 1985, 1988, 2011). Motivou-nos abordar esse panorama complexo em escolas regulares onde foram validadas etapas metodológicas sucessivas: 1. Conhecimento do contexto arquitetônico, humano e tecnológico das escolas; 2. Apresentação da educação bilíngue ao diretor e coordenador pedagógico; 3. Acompanhamento das salas de recursos, pela pesquisa, de modo a documentar a bidocência por meio dos registros fílmicos; 4. Construção de material de formação continuada a partir da edição de fotografias e filmagens para espaço da formação com os Instrutores Surdos, Intérpretes de LIBRAS e Professores das Salas de Recursos; 5. Encontros anuais de Educação Bilíngue organizados para 400 a 600 participantes. A pesquisa envolveu também algumas providências quanto a: equipar as salas de recursos com materiais pertinentes à surdez; capacitar professores, instrutores surdos e intérpretes de LIBRAS; oferecer cursos de formação continuada em LIBRAS. Delinearam-se três estilos de aula: a. Expositiva em língua de sinais com o uso mais tradicional de apresentação de assunto ou tema com incremento de imagens; b. Informatizada em língua de sinais com o uso de outros meios como história em quadrinhos, desenhos, jogos e representações; c. Dramatizada ou teatralizada em língua de sinais com o uso de recursos cênicos. Considerando que a perspectiva fundamental da didática assume o processo ensino-aprendizagem em sua multidimensionalidade, ou seja, os aspectos político, humano e técnico, como nos indica Candau (1983, 2012a), enxergá-la junto a uma parte dos instrutores surdos de língua de sinais fez parte da proposta desta pesquisa-ação que demandou 69 incursões a campo com filmagens desses estilos de aula e de recursos usados em 12 escolas-piloto de Educação Bilíngue no Município do Rio de Janeiro. Justifica-se o esforço de análise e, principalmente, de catalogação dos artefatos encontrados nas escolas públicas municipais cariocas, cerne desta tese, na qual o pano de fundo não deixam de ser as narrativas surdas, porém não nos prendendo a elas, mas à arte dos surdos e de alguns ouvintes em criar suportes, recursos, práticas pedagógicas que criam outros modos de ensino-aprendizagem em prol de uma didática da invenção surda. / [en] The central concern in this thesis is in the literacy of deaf students, which led to the consideration of the constitution of thought through signs and its possible socially constructed meanings. It is focused on the attempt to fill the gap pointed by Lebedeff (2010) on which would the pedagogical practices be from the discursive need of the visual experience of deafness and to which visual literacy events these discourses refer to. The specific objectives of the research were: 1. To identify the characteristics of the pedagogical practices of the deaf instructors acting in pilot schools of bilingual education in the city of Rio de Janeiro; 2. To analyze the interrelationships between the pedagogical practices of the deaf instructors with visual literacy or the use of resources supported by images. 3. To describe the pedagogical practices negotiated with the teacher (listener) together with the deaf instructor. However, we found out that are other practices that are occurring in the face of these factors such as the strong autobiographical tendency of the deaf individuals, expressed by the construction of deaf narratives in their own language, which involves not only sign language or written language (Brazilian Portuguese). To understand the negotiations of meaning, we set out to the language of interactions, which is a key factor in understanding the communication and sociability; these are realized not only by means and media, but also mediated by interpretations, desires and conflict. Given this perspective we considered that the deaf individuals are in a process of ritual imbalance and we approached games of interaction in a Goffman language (1981, 1985, 1988, 2011). We were motivated to address this complex panorama, in research, in regular schools where successive methodological steps were validated: 1 Knowledge of architectural, human, and technological context of the schools; 2 Presentation of bilingual education for the director and pedagogical coordinator; 3 Monitoring of resource rooms, in order the research, to document two teachers (deaf and hearing) through the records on film (movie); 4 Construction of continuing education material from the photo editing and filming for training with the deaf instructors, sign language interpreters and teachers of resources rooms; 5. Bilingual Education Annual meetings arranged for 400 to 600 participants. The research also involved some steps as: equip the rooms with resource materials relevant to deafness; continuing training for teachers, deaf instructors and deaf sign language interpreters; offer continuing education courses in sign language. Outlining three styles of curricula: a. Lecture in sign language with the more traditional use of presentation of subject or theme with incremental images; b. Computerized lesson in sign language with the use of other media like comics, cartoons, games and representations; c. Dramatized lesson in sign language with the use of scenic resources. Whereas basic didactic perspective assumes teaching-learning process in its multidimensionality, i.e. the political, human and technical aspects, as indicated by Candau (1983, 2012a), it was part of the purpose of this action-research to comprehend it along with some of the Deaf Instructors of the sign language: the lesson styles and the resources used by 12 Deaf Instructors. They are those who managed to promote sign language and deaf culture, with greater effectiveness, as the largest investment of resources in pilot schools of Bilingual Education in the Municipality of Rio de Janeiro. The effort of analysis is justified and especially the cataloging of the artifacts found in the public municipal schools of Rio de Janeiro - core of this thesis - in which the background is nonetheless deaf narratives, but not holding on to them, but to the art of deaf individuals and some listeners in creating means, resources, pedagogical practices that create other approaches to teaching and learning towards a teaching of the deaf invention.

[pt] Vivemos em um mundo inundado por imagens, que se multiplicam ainda mais na era digital. A presente dissertação de mestrado tem como ponto de partida a premissa de que imagens assim como os textos verbais podem ser lidas, pois são representações visuais. A linguagem das imagens é estudada há décadas por historiadores, comunicólogos e semiologistas. Proponho levá-la para a sala de aula, discutí-la e ainda criar um espaço em meio digital para relacioná-la à história vivida, fora do ambiente escolar. O tipo de imagem escolhida para dar materialização a este trabalho foram as tiras de quadrinhos sobre a temática da Guerra Fria. O local de difusão destas é um blog, tipo de diário digital que possibilita a troca de saberes entre professor e aluno. / [en] We live in a world flooded by images, which multiply even more in the digital age. The present Master s thesis has as its starting point the premise that images as well as verbal texts can be read, since they are visual representations. The language of images has been studied for decades by historians, communicologists and semiologists. I propose to take it to the classroom, to discuss it and to create a space in digital medium to relate it to the lived history, outside the school environment. The type of image chosen to give materialization to this work were comic strips on the theme of the Cold War. The place of diffusion of these is a blog, type of digital diary that allows the exchange of knowledge between teacher and student.