O principal objetivo do desenvolvimento de aplicações multimodais é possibilitar uma maneira mais natural dos seres humanos se comunicarem com as máquinas, por meio de interfaces mais eficientes, intuitivas, fáceis de usar e, de certa forma, mais inteligentes. No entanto, a literatura da área mostra que a reutilização, tanto de conhecimento como de código fonte, ainda apresenta problemas, dados a complexidade do código em sistemas multimodais, a falta de mecanismos eficientes de testes de usabilidade e a dificuldade em se gerenciar a captura, o armazenamento e a recuperação de conhecimento de projeto. Nesta tese argumenta-se que a utilização de uma abordagem sistemática, centrada no usuário, apoiada por uma ferramenta computacional e com um modelo bem definido que permita o desenvolvimento de interfaces multimodais com a reutilização de Design Rationale, aumenta e melhora os níveis de usabilidade, promove a identificação e utilização de padrões de projeto e o reúso de componentes. Para demonstrar esta tese, apresenta-se neste texto a abordagem para o desenvolvimento de interfaces multimodais Web, MMWA, e o seu ambiente de autoria, o MMWA-ae, ambos compostos por atividades que auxiliam a equipe de projeto durante as fases de projeto, desenvolvimento e avaliações de usabilidade. São discutidos também os resultados obtidos com a execução de três estudos de caso, realizados no ambiente acadêmico, nos quais se buscou determinar a viabilidade da abordagem e os benefícios que podem ser alcançados com a combinação de diferentes técnicas, a saber: design rationale, padrões de projeto, modelagem de tarefas, componentes de software, princípios de usabilidade, avaliações heurísticas, testes com usuários, regras de associação, entre outras. Os resultados evidenciam que a abordagem e seu ambiente de autoria podem proporcionar diferentes benefícios para organizações que desenvolvem sistemas multimodais, incluindo o aumento da usabilidade e consequentemente da qualidade do produto, bem como a diminuição de custos e da complexidade do desenvolvimento com a reutilização de código e de conhecimento capturado em projetos anteriores / The main goal of developing multimodal applications is to enable a more natural way of communication between human beings and machines through interfaces that are more efficient, intuitive, easier to use and, in a certain way, more intelligent. However, the literature shows that the reuse of both knowledge and source code still presents problems, given the complexity of the code in multimodal systems, the lack of efficient mechanisms to test the usability and the difficulty in managing the capture, the storage and the recovery of design knowledge. In this thesis it is discussed that the use of a systematic approach, usercentered, supported by a computer tool and with a well defined model that allows the development of multimodal interfaces with the reuse of DR, increases and improves the usability levels, promotes the identification and the use of design patterns and the reuse of components. To demonstrate this thesis, it is shown in this text an approach to develop Web multimodal interfaces (MMWA) and its authoring environment (MMWA-ae), both composed of activities that help the design team during the different project phases: design, development and usability evaluation. We also discuss in this thesis the results obtained with the execution of three case studies, executed in the academic environment, which aimed to determine the feasibility of the approach and the benefits that can be achieved with the combination of different techniques, such as: design rationale, design patterns, tasks model, software components, usability principles, heuristic evaluations, user testing, association rules, among others. The results show clearly that the approach and its author environment can provide different benefits to organizations that develop multimodal systems, including the usability improvement and, consequently, the quality of the product, as well as the decrease of costs and complexity since it encompasses the development with reused code and design knowledge captured in previous projects

Dissertação (mestrado) - Universidade Federal de Santa Catarina, Centro de Comunicação e Expressão, Programa de Pós-Graduação em Inglês: Estudos Linguísticos e Literários, Florianópolis, 2016. / Made available in DSpace on 2017-05-23T04:10:43Z (GMT). No. of bitstreams: 1 345685.pdf: 8110481 bytes, checksum: 31d9babbf7c44e75fcf949481a1338b9 (MD5) Previous issue date: 2016 / Abstract : Texts from the Brazilian teenage girls? magazine website todateen, as well as the American seventeen are constantly read by their target public, including the ones concerning ?love/dating? issues. Taking into account these texts may be read by teenage girls in order to find solutions for problems concerning romantic relationships, hidden ideologies present in them may influence the way girls see gender relations (Ostermann & Keller-Cohen, 1998). Due to such influence these media texts may have on girls, this study aims at investigating how girls and boys are represented in verbal and visual features of sixteen texts retrieved from todateen and seventeen websites in 2015 and 2016 in order to identify the presence of gender ideologies. Furthermore, interpersonal relations established between the texts and the reader are also investigated in this study. The theoretical frameworks used to support this multimodal analysis consist of the transitivity and mood systems (Halliday & Matthiessen, 2004; Eggins, 2004), the grammar of visual design (Kress & van Leeuwen, 2006), critical discourse analysis (Fairclough 1992, 2003, 2010, 2012) and gender studies (Butler, 2011; Cranny-Francis, Waring, Stavropoulos & Kirkby, 2003; Heberle, 2000; Louro, 2008). The main findings resulted from the verbal analysis suggest that girls are still represented according to traditional norms, since they are mostly advised to act in discreet ways and are represented as dependent on boys (taking care of their appearance and being aware of boys? preferences in order to please them). Boys, in turn, are represented as free from others? judgments and free from the consequences of their acts. As regards the interpersonal analysis, findings reveal that the texts are persuasive and have an authoritarian character, which is usually disguised by the use of a number of linguistic elements, such as modal verbs and modal adverbs. Concerning the visual analysis, girls and boys are represented in relations of equality. On the other hand, most of the images in the texts reinforce normative stereotypes related to race, physical characteristics, economic class and sexuality.<br> / Textos do web site da revista brasileira para garotas adolescentes todateen, assim com a revista americana seventeen, são constantemente lidos por seu público alvo, incluindo os que têm como temas ?amor/namoro?. Levando em conta que esses textos podem ser lidos por garotas adolescentes no intuito de encontrar soluções para problemas vinculados a relacionamentos amorosos, ideologias ocultas neles podem influenciar a maneira como essas garotas entendem relações de gênero (Ostermann & Keller-Cohen, 1998). Devido à influência que estes textos midiáticos podem ter sobre garotas, este estudo objetiva investigar como garotas e garotos são representados em características verbais e visuais de dezesseis textos coletados dos web sites das revistas todateen e seventeen em 2015 e 2016 com o objetivo de identificar a presença de ideologias de gênero. Além disso, relações interpessoais estabelecidas entre os textos e a leitora também são investigadas neste estudo. A abordagem teórica que suporta essa análise multimodal consiste nos sistemas de transitividade e modo (Halliday & Matthiessen, 2004; Eggins, 2004), a gramática visual (Kress & van Leeuwen, 2006), análise crítica do discurso (Fairclough 1992, 2003, 2010, 2012) e estudos de gênero (Butler, 2011, Cranny-Francis, Waring, Stavropoulos & Kirkby, 2003; Heberle, 2000; Louro, 2008). As principais constatações resultantes da análise verbal sugerem que garotas ainda são representadas de acordo com normas tradicionais, uma vez que elas são na maioria das vezes aconselhadas a agir de modo discreto e são representadas como dependentes de garotos (cuidando da aparência e estando alerta às preferências dos garotos para agradá-los). Garotos, por sua vez, são representados como livres dos julgamentos das outras pessoas e não responsáveis pelas consequências de seus atos. Considerando a análise interpessoal, constatações revelam que os textos são persuasivos e tem um caráter autoritário, que geralmente é disfarçado pelo uso de inúmeros elementos linguísticos tais como advérbios e verbos modais. No que diz respeito à análise visual, garotas e garotos são representados em relações de igualdade. Por outro lado, a maioria das imagens nos textos reforçam estereótipos normativos relacionados à raça, características físicas, classe econômica e sexualidade.

TEIXEIRA, Jeannie Fontes. Estratégias de referenciação em infográficos: contribuições da imagem para a progressão textual. 2016. 249f. – Dissertação (Mestrado) – Universidade Federal do Ceará, Programa de Pós-Graduação em Letras, Fortaleza (CE), 2016. / Submitted by Gustavo Daher (gdaherufc@hotmail.com) on 2017-02-21T16:13:46Z No. of bitstreams: 1 2016_dis_jfteixeira.pdf: 14472305 bytes, checksum: 985d20cfcaae069afc3c21e7880f7821 (MD5) / Approved for entry into archive by Márcia Araújo (marcia_m_bezerra@yahoo.com.br) on 2017-03-03T13:30:14Z (GMT) No. of bitstreams: 1 2016_dis_jfteixeira.pdf: 14472305 bytes, checksum: 985d20cfcaae069afc3c21e7880f7821 (MD5) / Made available in DSpace on 2017-03-03T13:30:15Z (GMT). No. of bitstreams: 1 2016_dis_jfteixeira.pdf: 14472305 bytes, checksum: 985d20cfcaae069afc3c21e7880f7821 (MD5) Previous issue date: 2016 / The infographic is a multimodal textual genre that gains expression in large-scale assessments of basic education such as PISA and ENEM. However, we have found little participation in this genre in the school sphere, especially in didactic materials, which indicates a gap in the treatment of this genre in school. Another indication of low familiarity of elementary school students with infographic is the low hit rate - as pointed out by PISA, for example - in questions that involve it. Having as guiding the presuppositions of the Referencing theory, we took into account the formulation of a didactic proposal as a task for a multimodal gender approach in elementary school classes. For this purpose, guided by Mondada and Dubois (2014), Cavalcante and Brito (2015; 2016), Cavalcante, Custódio Filho and Brito (2014), Koch and Elias (2016), Kress and van Leeuwen (1997) we have investigated the strategies of referential construction and thematic progression mobilized by the infographic focusing on its imagetic modality, in order to verify whether there are regularities that can support this proposal. For the analysis of the infographic as a textual genre, we have allied to the linguistic studies of textual genre (BAKTHIN, 1997), (BAZERMAN, 2009; 2011), (PAIVA, 2008, 2011) studies in the Social Communication Area (TEIXEIRA, 2010), (SOJO, 2002) which pointed out a typology applicable to teaching. The multimodal aspects of the infographic were verified by the association of the Referencing and The grammar of visual design presuppositions (KRESS E VAN LEUWEEN, 1996), as pointed out by Cavalcante and Brito (2015; 2016), Cavalcante, Custódio Filho and Brito (2014), Oliveira-Nascimento (2014). It is a mixed research, since it has mapped the occurrence of infographic in the L.P. textbooks of the elementary school, as well as indicating a possible categorization, as well as described and interpreted the strategies mobilized by the texts. The sample was consisted of 15 infographics collected from Portuguese textbooks collections approved by PNLD – 2017 and 3 questions from PISA exam. Among the verified regularities, (1) we have pointed out fundamental prototypical constituents for the establishment of the coherence in the infographic, (2) we have described the strategies mobilized by the genre because of its multimodality, (3) we have described the meta-strategies that the statements related to infographics in L.D. can guide and (4) we have verified the most present typology in textbooks of the Portuguese discipline of the teaching. From these elements, we have elaborated a sequence of activities focusing the application in fundamental classes, oriented by Bloom Taxonomy (1956), Furthermore, we have suggested further research with the purpose of expanding the perspectives of multimodal texts analysis by the Referencing presuppositions and to train the teacher of elementary education for didactic treatment of this genre. / O infográfico é um gênero textual multimodal que ganha expressão em avaliações de larga escala da educação básica, como o PISA e o ENEM. Entretanto, verificamos a pouca participação deste gênero na esfera escolar, especialmente nos materiais didáticos, o que indica uma lacuna no tratamento deste gênero na escola. Outro indicativo da pou¬ca familiaridade dos alunos da educação básica com o infográfico é o baixo índice de acertos – apontados pelo PISA, por exemplo – em questões que o envolvem. Tendo como norteadores os pressupostos da teoria da Referenciação, tomamos como tarefa a formulação de uma proposta didática para a abordagem desse gênero multimodal em turmas de Ensino Fundamental. Para esse intento, norteados por Mondada e Dubois (2014), Cavalcante & Brito (2015; 2016), Cavalcante, Custódio Filho e Brito (2014), Koch e Elias (2016), Kress e van Leeuwen (1997) investigamos as estratégias de construção referencial e de progressão temática mobilizadas pelo infográfico com foco em sua modalidade imagética, a fim de verificarmos se há regularidades que possam amparar essa proposta. Para a análise do infográfico enquanto gênero textual, aliamos aos estudos Linguísticos de gênero textual (BAKTHIN, 1997), (BAZERMAN, 2009; 2011), (PAIVA, 2008, 2011) estudos da área da Comunicação Social (TEIXEIRA, 2010), (SOJO, 2002) que apontaram uma tipologia aplicável ao ensino. Os aspectos multimodais do infográfico foram verificados pela associação dos pressupostos da Referenciação com os pressupostos da Gramática do Design Visual (KRESS E VAN LEUWEEN, 1996), como apontada por Cavalcante e Brito (2015; 2016), Cavalcante, Custódio Filho E Brito (2014), Oliveira-Nascimento (2014). Trata-se de pesquisa mista, uma vez que mapeou a ocorrência de infográficos dos livros didáticos de L.P. do ensino fundamental, bem como indicou uma possível categorização, bem como descreveu e interpretou as estratégias mobilizadas pelos textos. O exemplário foi constituído por 15 infográficos coletados das coleções de livros didáticos de Língua Portuguesa aprovados pelo PNLD – 2017 e 3 questões do exame PISA. Dentre as regularidades verificadas, (1) apontamos constituintes prototípicos fundamentais para o estabelecimento da coerência no infográfico, (2) descrevemos as estratégias mobilizadas pelo gênero em razão da sua multimodalidade, (3) descrevemos as metaestratégias que os enunciados referentes aos infográficos no L.D. podem orientar e (4) verificamos a tipologia mais presente em livros didáticos da disciplina de Língua Portuguesa do ensino. A partir desses elementos, elaboramos uma sequência de atividades com vistas à aplicação em turmas de fundamental, orientada pela Taxonomia de Bloom (1956). Ademais, sugerimos pesquisas posteriores com a finalidade de ampliar as perspectivas de análise de textos multimodais pelos pressupostos da Referenciação e de formar o professor de ensino fundamental para tratamento didático deste gênero.

Submitted by Maria Suzana Diniz (msuzanad@hotmail.com) on 2015-11-17T14:28:58Z No. of bitstreams: 1 arquivototal.pdf: 19177999 bytes, checksum: 1d75c3d00ebbb7e459cf21c25322c583 (MD5) / Made available in DSpace on 2015-11-17T14:28:58Z (GMT). No. of bitstreams: 1 arquivototal.pdf: 19177999 bytes, checksum: 1d75c3d00ebbb7e459cf21c25322c583 (MD5) Previous issue date: 2014-07-23 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior - CAPES / This research aims to analyze how the activities of reading multimodal texts, the textbook Portuguese 2nd year of elementary school, explore the multimodal reading way to contribute to the multimodal literacy. We selected for analysis, the verbal-image multimodal texts present in the textbook Portuguese, look at the activities of reading of selected texts and analyze how reading activities help to develop the specific reader capabilities for multimodal literacy. This research is characterized as a descriptive research-analytical nature, adopting a methodology of qualitative and quantitative approach. In the analysis we found four major categories to relate the images to texts: Category 1 when a text does not mention either directs the reading of an image, nor can we infer a relationship between the two, we say that the text does not refer to the image; this case, the image has no connection with the texts that surround it (the picture does not illustrate the text). When a text does not directly mention a picture, but we can infer their relationship with it, we say that the text refers indirectly to the image: Category 2 - The picture is related to the text, but does not add any information (image only illustrates the text) and Category 3 the image, besides illustrating assists in the understanding of a given text (illustrates and influences the understanding of the text). We still have a Category 4 when a text makes explicit mention of an image say that this text refers directly to the image, so this is required for which shows meaning of a text (the image interacts with the text). As a result, we find that the 23 texts analyzed, 17 (74%) do not exploit the image / illustration. And these 17 texts, 8, and do not exploit the image / illustration in its activities, the LD does not offer suggestions for actions to such exploitation. This means that the image takes merely illustrative function in 34.8% of multimodal texts analyzed, i.e, beyond these texts do not exploit the image / illustration in their activities, there are no suggestions of actions to this exploitation by the LD. Therefore, with reference to the mobilization of habilities visual readers, from reading activities, we can say that the effective teaching material not in its fullness, although pointing to a work in which the visual language for consideration. Finally, we conclude that this research will contribute to the improvement of teaching as encourage teachers to explore multimodal texts, developing skills in reading these texts for students in a more comprehensive and enriching way, allowing their interaction in different social environments to use different languages in a meaningful and consistent manner. / A presente pesquisa tem como objetivo analisar como as atividades de leitura dos textos multimodais, do livro didático de Português do 2º ano do Ensino Fundamental, exploram a leitura multimodal de maneira que contribuam para o letramento multimodal. Para isso, selecionamos, para análise, os textos multimodais verbo-visuais presentes no livro didático de Português, observamos as atividades de leitura dos textos selecionados e analisamos como as atividades de leitura contribuem para desenvolver as capacidades leitoras específicas para o letramento multimodal. Esta investigação é caracterizada como uma pesquisa de cunho descritivo-analítico, adotando uma metodologia de abordagem quali-quantitativa. Na análise encontramos quatro grandes categorias para relacionar as imagens aos textos: Categoria 1- quando um texto não menciona nem direciona a leitura de uma imagem, nem podemos inferir uma relação entre os dois, dizemos que o texto não remete à imagem; neste caso, a imagem não possui ligação com os textos que a cercam (a imagem não ilustra o texto). Quando um texto não menciona diretamente uma imagem, mas podemos inferir sua relação com ela, dizemos que o texto remete indiretamente à imagem: Categoria 2 - a imagem possui relação com o texto, mas não lhe acrescenta nenhuma informação (a imagem apenas ilustra o texto) e Categoria 3- a imagem, além de ilustrar, auxilia no entendimento de um determinado texto (ilustra e influencia no entendimento do texto). Ainda temos a Categoria 4- quando um texto faz menção explícita a uma imagem dizemos que esse texto remete diretamente à imagem, portanto, esta é necessária para que se depreenda sentido de um texto (a imagem interage com o texto). Como resultados, encontramos que dos 23 textos analisados, 17 (74%) não exploram a imagem/ilustração. E desses 17 textos, 8, além de não explorarem a imagem/ilustração em suas atividades, o LD não oferece sugestões de ações voltadas a essa exploração. Isso significa que a imagem assume função meramente ilustrativa em 34,8% dos textos multimodais analisados, ou seja, além desses textos não explorarem a imagem/ilustração em suas atividades, não há sugestões de ações voltadas a essa exploração por parte do LD. Portanto, com referência à mobilização das capacidades leitoras visuais, a partir das atividades de leitura, podemos afirmar que o material didático não as efetiva em sua plenitude, embora apontem para um trabalho em que a linguagem visual seja levada em consideração. Por fim, podemos concluir que esta pesquisa irá contribuir para a melhoria do ensino, pois incentivará os professores a explorarem os textos multimodais, desenvolvendo habilidades na leitura desses textos pelos alunos, de maneira mais abrangente e enriquecedora, possibilitando sua interação em diferentes ambientes sociais ao utilizarem diferentes linguagens de forma significativa e coerente.

Submitted by Automa??o e Estat?stica (sst@bczm.ufrn.br) on 2017-10-05T19:37:01Z No. of bitstreams: 1 MariaMarleneDosSantosVianaDaSilva_DISSERT.pdf: 6636730 bytes, checksum: 475d2bc88b5323a54d953cd9cd6b7e51 (MD5) / Approved for entry into archive by Arlan Eloi Leite Silva (eloihistoriador@yahoo.com.br) on 2017-10-17T22:43:34Z (GMT) No. of bitstreams: 1 MariaMarleneDosSantosVianaDaSilva_DISSERT.pdf: 6636730 bytes, checksum: 475d2bc88b5323a54d953cd9cd6b7e51 (MD5) / Made available in DSpace on 2017-10-17T22:43:34Z (GMT). No. of bitstreams: 1 MariaMarleneDosSantosVianaDaSilva_DISSERT.pdf: 6636730 bytes, checksum: 475d2bc88b5323a54d953cd9cd6b7e51 (MD5) Previous issue date: 2016-05-30 / Nas ?ltimas d?cadas, as pesquisas que envolvem o ensino de leitura v?m apresentando resultados poucos satisfat?rios, haja vista que a escola vem falhando na sua fun??o de formar leitores. Tudo isso se deve ao fato de que os alunos t?m apresentado um alto grau de desmotiva??o ao se deparar com as atividades de leitura, al?m de estarem inseridos em uma sociedade na qual predomina a tecnologia que os envolve e os motiva. Dessa forma, os avan?os tecnol?gicos acabam gerando uma rela??o de depend?ncia e necessidade de uso, fazendo com que as pessoas busquem as tecnologias como uma esp?cie de sobreviv?ncia. Nessa perspectiva, realizamos uma interven??o pedag?gica sobre o ensino de leitura, tendo como ferramenta o ?Facebook?, tendo em vista que o uso desse aparato tecnol?gico j? faz parte do dia a dia dos alunos. Desse modo, acreditamos que esse recurso did?tico servir? para estimul?-los a ler, criando assim um h?bito constante em suas vidas. Para tanto, elegemos como objetivo propor situa??es concretas para o uso do ?Facebook?, apresentando os g?neros discursivos multimodais que circulam neste meio virtual, motivando os alunos a ler a partir de algo que seja do seu interesse. A pesquisa est? inserida no ?mbito da Lingu?stica Aplicada, centrando-se no ensino da leitura numa concep??o dial?gica e interativa da linguagem, nos g?neros discursivos multimodais, na multimodalidade, nos letramentos digital e visual, nos hipertextos e nas Tecnologias de Informa??o e Comunica??o, levando em considera??o a leitura como uma pr?tica social. Foram tomados como referenciais Cosson (2014), Sol? (1998), Koch e Elias (2013), Leffa (1996), Dion?sio (2005), Koch (2009), (2004), Garcez (2001), Silva (1992), Kleiman (2000, 2002), Marcuschi e Xavier (2004), Ribeiro (2013), Silva (2004), Bakhtin (1992, 2003 e 2011), Marcuschi (2001, 2008 e 2010) entre outros. Metodologicamente, encontramos respaldo em alguns princ?pios da pesquisa-a??o, tendo em vista que se ajusta ao prop?sito de realizar uma interven??o, cujo objetivo ? minimizar as dificuldades que interferem no desenvolvimento da capacidade leitora dos alunos. Nas an?lises, procuramos observar como se dava essa interven??o e como esse aparato virtual estava contribuindo para melhorar o h?bito de leitura dos nossos alunos. Dessa forma, podemos afirmar que os resultados alcan?ados foram positivos, pois ao longo da pesquisa identificamos que a partir do uso do ?Facebook? surge um novo perfil de leitor, ou seja, um leitor navegador que utiliza v?rias estrat?gias de leitura para ler e compreender os textos que s?o postados e comentados nesse meio virtual. Al?m disso, constatamos tamb?m que a maioria das leituras que os alunos realizam diariamente acontece mais no ?Facebook? do que na pr?pria sala de aula. Assim, mesmo enfrentando algumas dificuldades ao longo da interven??o, fomos capazes de criar situa??es concretas para o uso do ?Facebook?, estimulando os nossos alunos a ler a partir de algo que fosse de seu interesse e que fizesse parte do seu cotidiano, sendo significativo e eficaz para sua vida escolar e social. / In recent decades, research involving the teaching of reading is showing few satisfactory results, given that the school is failing in its task of educating readers. All this is because students have shown a high degree of motivation when faced with reading activities, besides inserted in a society in which dominates the technology that surrounds them and motivates them. Thus, technological advances end up generating a relationship of dependency and need to use, causing people to pursue technology as a kind of survival. From this perspective, we conducted an educational intervention on the teaching of reading, with the tool "Facebook?, considering that the use of this technological apparatus is already part of the daily life of students. Thus, we believe that this teaching tool will serve to encourage them to read, thus creating a constant habit in your lives. Therefore, we elected the objective of proposing concrete situations for the use of Facebook, with discursive multimodal genres that circulate in this virtual environment, motivating students to read from something that is of interest. The research is inserted in Applied Linguistic, focusing on teaching reading in a dialogic and interactive design language, in the discursive multimodal genres, in multimodality, in digital and visual literacies, in hypertext and in Information and Communication technologies, taking into account reading as a social practice. They were taken as reference Cosson (2014), Sol? (1998), Koch e Elias (2013), Leffa (1996), Dion?sio (2005), Koch (2009), (2004), Garcez (2001), Silva (1992), Kleiman (2000, 2002), Marcuschi e Xavier (2004), Ribeiro (2013), Silva (2004), Bakhtin (1992, 2003 e 2011), Marcuschi (2001, 2008 e 2010) and others. Methodologically, we find support in some principles of action research, with a view that fits the purpose of performing an intervention, whose goal is to minimize the difficulties that interfere with the development of reading ability of students. In the analyzes, we tried to observe how this intervention was given and how this virtual apparatus was contributing to improve the reading habit of our students. In this way, we can affirm that the results achieved were positive, since throughout the reach we identified that from the use of ?Facebook? a new reader profile arises, that is, a browser reader that uses several reading strategies to read and understand the texts that are posted and commented in this virtual environment. In addition, we also find that most of the readings that students take on a daily basis happen more on ?Facebook? than in the classroom itself. Thus, even though we faced some difficulties during the intervention, we were able to create concrete situations for the use of ?Facebook?, stimulating our students to read from something that was part of their interest and that was part of their daily life, being significant and affective for their school and social life.

O principal objetivo do desenvolvimento de aplicações multimodais é possibilitar uma maneira mais natural dos seres humanos se comunicarem com as máquinas, por meio de interfaces mais eficientes, intuitivas, fáceis de usar e, de certa forma, mais inteligentes. No entanto, a literatura da área mostra que a reutilização, tanto de conhecimento como de código fonte, ainda apresenta problemas, dados a complexidade do código em sistemas multimodais, a falta de mecanismos eficientes de testes de usabilidade e a dificuldade em se gerenciar a captura, o armazenamento e a recuperação de conhecimento de projeto. Nesta tese argumenta-se que a utilização de uma abordagem sistemática, centrada no usuário, apoiada por uma ferramenta computacional e com um modelo bem definido que permita o desenvolvimento de interfaces multimodais com a reutilização de Design Rationale, aumenta e melhora os níveis de usabilidade, promove a identificação e utilização de padrões de projeto e o reúso de componentes. Para demonstrar esta tese, apresenta-se neste texto a abordagem para o desenvolvimento de interfaces multimodais Web, MMWA, e o seu ambiente de autoria, o MMWA-ae, ambos compostos por atividades que auxiliam a equipe de projeto durante as fases de projeto, desenvolvimento e avaliações de usabilidade. São discutidos também os resultados obtidos com a execução de três estudos de caso, realizados no ambiente acadêmico, nos quais se buscou determinar a viabilidade da abordagem e os benefícios que podem ser alcançados com a combinação de diferentes técnicas, a saber: design rationale, padrões de projeto, modelagem de tarefas, componentes de software, princípios de usabilidade, avaliações heurísticas, testes com usuários, regras de associação, entre outras. Os resultados evidenciam que a abordagem e seu ambiente de autoria podem proporcionar diferentes benefícios para organizações que desenvolvem sistemas multimodais, incluindo o aumento da usabilidade e consequentemente da qualidade do produto, bem como a diminuição de custos e da complexidade do desenvolvimento com a reutilização de código e de conhecimento capturado em projetos anteriores / The main goal of developing multimodal applications is to enable a more natural way of communication between human beings and machines through interfaces that are more efficient, intuitive, easier to use and, in a certain way, more intelligent. However, the literature shows that the reuse of both knowledge and source code still presents problems, given the complexity of the code in multimodal systems, the lack of efficient mechanisms to test the usability and the difficulty in managing the capture, the storage and the recovery of design knowledge. In this thesis it is discussed that the use of a systematic approach, usercentered, supported by a computer tool and with a well defined model that allows the development of multimodal interfaces with the reuse of DR, increases and improves the usability levels, promotes the identification and the use of design patterns and the reuse of components. To demonstrate this thesis, it is shown in this text an approach to develop Web multimodal interfaces (MMWA) and its authoring environment (MMWA-ae), both composed of activities that help the design team during the different project phases: design, development and usability evaluation. We also discuss in this thesis the results obtained with the execution of three case studies, executed in the academic environment, which aimed to determine the feasibility of the approach and the benefits that can be achieved with the combination of different techniques, such as: design rationale, design patterns, tasks model, software components, usability principles, heuristic evaluations, user testing, association rules, among others. The results show clearly that the approach and its author environment can provide different benefits to organizations that develop multimodal systems, including the usability improvement and, consequently, the quality of the product, as well as the decrease of costs and complexity since it encompasses the development with reused code and design knowledge captured in previous projects

O objetivo do presente trabalho de pesquisa é reduzir o nível de atenção requerido para o uso do sistema Borboleta por meio de reconhecimento de fala na navegação através das funcionalidades do sistema, permitindo ao profissional dar maior atenção ao paciente. A metodologia de desenvolvimento do projeto inclui uma revisão bibliográfica para definir o estado da arte da área, uma pesquisa sobre o software disponível para reconhecimento de fala, uma coleta de dados dos comandos do sistema em português brasileiro para treinar e testar o sistema, uma etapa de projeção e desenvolvimento para definir a arquitetura de integração com o Borboleta, e uma fase de testes para medir a precisão do sistema e seus níveis de usabilidade e aceitação por parte do usuário. / The current document presents research that addresses the goal of reducing the user attention level required by Borboleta operation by providing speech recognition capabilities to augment navigation through the software functions, allowing the professional to pay more attention to the patient. The project methodology is composed of a bibliography revision to establish the state-of-the-art of the field, a review of available speech recognition software, data collection of Brazilian utterances to train and test the system, a design and development stage that defined the system architecture and integration with Borboleta and a testing process to measure the system accuracy, its usability and acceptance level.

Interfaces multimodais processam vários tipos de entrada do usuário, tais como voz, gestos e interação com caneta, de uma maneira combinada e coordenada com a saída multimídia do sistema. Aplicações que suportam a multimodalidade provêem um modo mais natural e flexível para a execução de tarefas em computadores, uma vez que permitem que usuários com diferentes níveis de habilidades escolham o modo de interação que melhor se adequa às suas necessidades. O uso de interfaces que fogem do estilo convencional de interação baseado em teclado e mouse vai de encontro ao conceito de computação ubíqua, que tem se estabelecido como uma área de pesquisa que estuda os aspectos tecnológicos e sociais decorrentes da integração de sistemas e dispositivos computacionais à ambientes. Nesse contexto, o trabalho aqui reportado visou investigar a implementação de interfaces multimodais em aplicações de computação ubíqua, por meio da construção de um framework de software para integração de modalidades de escrita e voz / Multimodal interfaces process several types of user inputs, such as voice, gestures and pen interaction, in a combined and coordinated manner with the system?s multimedia output. Applications which support multimodality provide a more natural and flexible way for executing tasks with computers, since they allow users with different levels of abilities to choose the mode of interaction that best fits their needs. The use of interfaces that run away from the conventional style of interaction, based in keyboard and mouse, comes together with the concept of ubiquitous computing, which has been established as a research area that studies the social and technological aspects decurrent from the integration os systems and devices into the environments. In this context, the work reported here aimed to investigate the implementation of multimodal interfaces in ubiquitous computing applications, by means of the building of a software framework used for integrating handwriting and speech modalities

Submitted by Andrea Pereira (andrea.pereira@unipampa.edu.br) on 2019-02-25T13:09:34Z No. of bitstreams: 2 Diss Flávia Alves 2018 (1).pdf: 2763085 bytes, checksum: a2c3ca0748696279c19c0187a5f73725 (MD5) Prod. Edu. Flávia Alves 2018.pdf: 776809 bytes, checksum: 104a7eaca7c63eb8d2460b7dbf27c14c (MD5) / Approved for entry into archive by Dayse Pestana (dayse.pestana@unipampa.edu.br) on 2019-02-25T15:57:01Z (GMT) No. of bitstreams: 2 Diss Flávia Alves 2018 (1).pdf: 2763085 bytes, checksum: a2c3ca0748696279c19c0187a5f73725 (MD5) Prod. Edu. Flávia Alves 2018.pdf: 776809 bytes, checksum: 104a7eaca7c63eb8d2460b7dbf27c14c (MD5) / Made available in DSpace on 2019-02-25T15:57:01Z (GMT). No. of bitstreams: 2 Diss Flávia Alves 2018 (1).pdf: 2763085 bytes, checksum: a2c3ca0748696279c19c0187a5f73725 (MD5) Prod. Edu. Flávia Alves 2018.pdf: 776809 bytes, checksum: 104a7eaca7c63eb8d2460b7dbf27c14c (MD5) Previous issue date: 2018-12-14 / O objetivo dessa pesquisa é investigar a relação entre a explicitação de inferências e uma leitura proficiente e crítica em textos multimodais. Para isso, nos ancoramos em Vargas (2012, 2015, 2017, 2018), que entende inferências como a criação de algo inédito a partir da relação entre conhecimento prévio e informações selecionadas no texto. Também nos ancoramos em Kleiman (2001) para justificar nossa escolha pelo trabalho com inferências, já que para a autora são as inferências que fazemos durante a leitura que retemos na memória e não informação literal. Também é fundamental discutir o que entendemos por metainferência, que, para Díaz (2003), é a reflexão sobre o processo inferencial. Com relação à metodologia, realizamos uma pesquisa-ação que tem por objetivo analisar uma intervenção feita em uma turma de terceiro ano do Ensino Médio de uma escola pública da cidade de Bagé, por meio de uma WebQuest, uma pesquisa orientada na internet que tinha como temática a representação da mulher em textos mutimodais, em especial, músicas e videoclipes. A temática escolhida se relaciona com o objetivo de que os alunos tenham uma leitura crítica. Além disso, apesar dos avanços, é possível perceber que a mulher ainda enfrenta muita opressão em nossa sociedade e entender como ela é representada na mídia ajuda a entender essa opressão. Os resultados apontam que os alunos passaram a valorizar seu conhecimento prévio na relação com o texto, além de perceberem o papel do estabelecimento de objetivos e hipóteses para a leitura. Além disso, os alunos foram capazes de falar explicitamente sobre inferências e avaliar quando perguntas são inferenciais ou não; isso indica que o trabalho com a explicitação de inferências auxiliou para que os alunos se tornassem mais proficientes. Houve uma mudança em relação ao conceito de texto, que foi ampliado. Os alunos passaram a perceber outras possibilidades de texto, não só o verbal escrito, o que ampliou a ideia de texto mutimodal, que conjuga diferentes semioses. Por fim, os alunos mostraram maior criticidade em relação à temática trabalhada, representação da mulher, assim como o número de respostas inferenciais aumentou. Apesar dos resultados positivos encontrados, foi possível perceber que estes poderiam ser ampliados a partir de um trabalho contínuo com a metainferência em leitura. Além das mudanças em relação à leitura, foi possível perceber uma mudança em relação ao comportamento com os colegas: conseguimos construir uma comunidade, em que os alunos aprenderam a se ouvir e se respeitar. / This research investigates the relation between the exposition of inferences and the students’ levels in proficiency and critical reading of texts. Having that in mind, we anchor ourselves in Vargas (2012, 2015, 2017, 2018), which studies inferences on the creation of something previously inexistent based on the link between prior knowledge and selected information from a text. We resort to Kleiman (2001) to justify our choice on working with inferences, as for the author it’s the inferences we make while reading that we retain in memory and not literal information. It is also fundamental to discuss what we understand by meta-inference, which, for Díaz (2003), is the reflection on the inferential process. Regarding the methodology, we analyzed a conducted intervention made in a third-year high school class at a public school in the city of Bagé, through a WebQuest, an internet-oriented research on the representation of women in mutimodal texts, especially music and video clips. The choice of this thematic is related to the objective of the research, that students have a critic reading. Besides that, although the advances, it is possible perceive that woman faces oppression in our society and the understanding how she is represented in midia, helps to understand this oppression. The results show that the students began to use their previous knowledge in relation to the text, in addition to perceiving the role of establishing goals and hypotheses for reading. In addition, students were able to speak explicitly about inferences and evaluate when questions are inferential or not; this indicates that the work with the explanation of inferences helped on augmenting the students proficiency. There has been a change on their concept of text, which has been expanded. The students began to perceive other possibilities of text, not only the written or verbal, which extended the idea of mutimodal text, that conjugates different semioses. Finally, the students showed greater criticality in relation to the themed work, representation of the woman, as well as the number of inferential answers increased. Despite the positive results found, it was possible to perceive that these could be amplified by a continuous work with the meta-inference in reading. In addition to the changes in relation to reading, it was possible to perceive a change in relation to the behavior with the colleagues, we were able to build a community, in which the students learned to listen and to respect.

Interfaces multimodais processam vários tipos de entrada do usuário, tais como voz, gestos e interação com caneta, de uma maneira combinada e coordenada com a saída multimídia do sistema. Aplicações que suportam a multimodalidade provêem um modo mais natural e flexível para a execução de tarefas em computadores, uma vez que permitem que usuários com diferentes níveis de habilidades escolham o modo de interação que melhor se adequa às suas necessidades. O uso de interfaces que fogem do estilo convencional de interação baseado em teclado e mouse vai de encontro ao conceito de computação ubíqua, que tem se estabelecido como uma área de pesquisa que estuda os aspectos tecnológicos e sociais decorrentes da integração de sistemas e dispositivos computacionais à ambientes. Nesse contexto, o trabalho aqui reportado visou investigar a implementação de interfaces multimodais em aplicações de computação ubíqua, por meio da construção de um framework de software para integração de modalidades de escrita e voz / Multimodal interfaces process several types of user inputs, such as voice, gestures and pen interaction, in a combined and coordinated manner with the system?s multimedia output. Applications which support multimodality provide a more natural and flexible way for executing tasks with computers, since they allow users with different levels of abilities to choose the mode of interaction that best fits their needs. The use of interfaces that run away from the conventional style of interaction, based in keyboard and mouse, comes together with the concept of ubiquitous computing, which has been established as a research area that studies the social and technological aspects decurrent from the integration os systems and devices into the environments. In this context, the work reported here aimed to investigate the implementation of multimodal interfaces in ubiquitous computing applications, by means of the building of a software framework used for integrating handwriting and speech modalities