Este trabalho propõe um módulo básico de aquisição e pré-processamento de imagem colorida aplicado a robôs móveis, implementado em hardware reconfigurável, dentro do conceito de sistemas SoC (System-on-a-Chip). O módulo básico é apresentado em conjunto com funções mais específicas de pré-processamento de imagem, que são utilizadas como base para a verificação das funcionalidades implementadas no trabalho proposto. As principais funções realizadas pelo módulo básico são: montagem de frames a partir dos pixels obtidos da câmera digital CMOS, controle dos diversos parâmetros de configuração da câmera e conversão de padrões de cores. Já as funções mais específicas abordam as etapas de segmentação, centralização, redução e interpretação das imagens adquiridas. O tipo de dispositivo reconfigurável utilizado neste trabalho é o FPGA (Field-Programmable Gate Array), que permite maior adequação das funções específicas às necessidades das aplicações, tendo sempre como base o módulo proposto. O sistema foi aplicado para reconhecer gestos e obteve a taxa 99,57% de acerto operando a 31,88 frames por segundo. / This work proposes a basic module for a mobile robot color image capture and pre-processing, implemented in reconfigurable hardware based on SoC (System-on-a-Chip). The basic module is presented with a specifics image pre-processing function that are used as a base for verify the functionalities implemented in this research. The mains functions implemented on this basic module are: to read the pixels provide by the CMOS camera for compose the frame, to adjust the parameters of the camera control and to convert color space. The specifics image pre-processing functions are used to do image segmentation, centralization, reduction and image classification. The reconfigurable dispositive used in this research is the FPGA (Field-Programmable Gate Array) that permit to adapt the specific function according to the application needs. The system was applied to recognize gesture and had 99,57% rate of true recognition at 31,88 frames per second.

Recentemente, tem se percebido um interesse maior da área de computação pela pesquisa em análise de gestos. Parte dessas pesquisas visa dar suporte aos pesquisadores da área de \"estudos dos gestos\", que estuda o uso de partes do corpo para fins comunicativos. Pesquisadores dessa área analisam gestos a partir de transcrições de conversas ou discursos gravados em vídeo. Para a transcrição dos gestos, geralmente realiza-se a sua segmentação em unidades gestuais e fases. O presente trabalho tem por objetivo desenvolver estratégias para segmentação automatizada das unidades gestuais e das fases dos gestos contidos em um vídeo no contexto de contação de histórias, formulando o problema como uma tarefa de classificação supervisionada. As Máquinas de Vetores Suporte foram escolhidas como método de classificação, devido à sua capacidade de generalização e aos bons resultados obtidos para diversos problemas complexos. Máquinas de Vetores Suporte, porém, não consideram os aspectos temporais dos dados, características que são importantes na análise dos gestos. Por esse motivo, este trabalho investiga métodos de representação temporal e variações das Máquinas de Vetores Suporte que consideram raciocínio temporal. Vários experimentos foram executados neste contexto para segmentação de unidades gestuais. Os melhores resultados foram obtidos com Máquinas de Vetores Suporte tradicionais aplicadas a dados janelados. Além disso, três estratégias de classificação multiclasse foram aplicadas ao problema de segmentação das fases dos gestos. Os resultados indicam que um bom desempenho para a segmentação de gestos pode ser obtido ao realizar o treinamento da estratégia com um trecho inicial do vídeo para obter uma segmentação automatizada do restante do vídeo. Assim, os pesquisadores da área de \"estudos dos gestos\" poderiam segmentar manualmente apenas um trecho do vídeo, reduzindo o tempo necessário para realizar a análise dos gestos presentes em gravações longas. / Recently, it has been noted an increasing interest from computer science for research on gesture analysis. Some of these researches aims at supporting researchers from \"gesture studies\", which studies the use of several body parts for communicative purposes. Researchers of \"gesture studies\" analyze gestures from transcriptions of conversations and discourses recorded in video. For gesture transcriptions, gesture unit segmentation and gesture phase segmentation are usually employed. This study aims to develop strategies for automated segmentation of gestural units and phases of gestures contained in a video in the context of storytelling, formulating the problem as a supervised classification task. Support Vector Machines were selected as classification method, because of its ability to generalize and good results obtained for many complex problems. Support Vector Machines, however, do not consider the temporal aspects of data, characteristics that are important for gesture analysis. Therefore, this paper investigates methods of temporal representation and variations of the Support Vector machines that consider temporal reasoning. Several experiments were performed in this context for gesture units segmentation. The best results were obtained with traditional Support Vector Machines applied to windowed data. In addition, three strategies of multiclass classification were applied to the problem of gesture phase segmentation. The results indicate that a good performance for gesture segmentation can be obtained by training the strategy with an initial part of the video to get an automated segmentation of the rest of the video. Thus, researchers in \"gesture studies\" could manually segment only part of the video, reducing the time needed to perform the analysis of gestures contained in long recordings.

O objetivo deste trabalho é tornar possível a inserção de um robô humanoide para auxiliar pacientes em sessões de fisioterapia. Um sistema robótico é proposto que utiliza um robô humanoide, denominado NAO, visando analisar os movimentos feitos pelos pacientes e corrigi-los se necessário, além de motivá-los durante uma sessão de fisioterapia. O sistema desenvolvido permite que o robô, em primeiro lugar, aprenda um exercício correto de fisioterapia observando sua execução por um fisioterapeuta; em segundo lugar, que ele demonstre o exercício para que um paciente possa imitá-lo; e, finalmente, corrija erros cometidos pelo paciente durante a execução do exercício. O exercício correto é capturado por um sensor Kinect e dividido em uma sequência de estados em dimensão espaço-temporal usando k-means clustering. Estes estados então formam uma máquina de estados finitos para verificar se os movimentos do paciente estão corretos. A transição de um estado para o próximo corresponde a movimentos parciais que compõem o movimento aprendido, e acontece somente quando o robô observa o mesmo movimento parcial executado corretamente pelo paciente; caso contrário o robô sugere uma correção e pede que o paciente tente novamente. O sistema foi testado com vários pacientes em tratamento fisioterapêutico para problemas motores. Os resultados obtidos, em termos de precisão e recuperação para cada movimento, mostraram-se muito promissores. Além disso, o estado emocional dos pacientes foi também avaliado por meio de um questionário aplicado antes e depois do tratamento e durante o tratamento com um software de reconhecimento facial de emoções e os resultados indicam um impacto emocional bastante positivo e que pode vir a auxiliar pacientes durante tratamento fisioterapêuticos. / This dissertation develops a robotic system to guide patients through physiotherapy sessions. The proposed system uses the humanoid robot NAO, and it analyses patients movements to guide, correct, and motivate them during a session. Firstly, the system learns a correct physiotherapy exercise by observing a physiotherapist perform it; secondly, it demonstrates the exercise so that the patient can reproduce it; and finally, it corrects any mistakes that the patient might make during the exercise. The correct exercise is captured via Kinect sensor and divided into a sequence of states in spatial-temporal dimension using k-means clustering. Those states compose a finite state machine that is used to verify whether the patients movements are correct. The transition from one state to the next corresponds to partial movements that compose the learned exercise. If the patient executes the partial movement incorrectly, the system suggests a correction and returns to the same state, asking that the patient try again. The system was tested with multiple patients undergoing physiotherapeutic treatment for motor impairments. Based on the results obtained, the system achieved high precision and recall across all partial movements. The emotional impact of treatment on patients was also measured, via before and after questionnaires and via a software that recognizes emotions from video taken during treatment, showing a positive impact that could help motivate physiotherapy patients, improving their motivation and recovery.

Made available in DSpace on 2015-05-14T12:43:27Z (GMT). No. of bitstreams: 1 arquivototal.pdf: 1454620 bytes, checksum: 20676365cee0fb8168374042cecc7603 (MD5) Previous issue date: 2010-03-01 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior / This production had the intention to monitor the emergence of language as a multimodal instance in contexts of joint attention occurred in naturalistic situations of two motherbaby dyads, from seven to seventeen months of the child. Thus we work with the multimodal envelope perspective, i.e., the fusion of three components of the dialogism look, gestures and vocal production that emerge simultaneously. We consider the concept of multimodality proposed by McNeill (1985) as a mixture of the gesture-vocal actions. The studies in language acquisition and in nonverbal communication postulate theoretical assumptions about linguistic, paralinguistic and extralinguistic elements in a dissociated way. The first ones had as primacy the observation of interlocutors speech and writing in various contexts. The second type was justified as a complement to the linguistic and the extralinguistic elements were considered as accessories used as aids to the speech. Our results show that the mother uses the multimodal composition to address herself to the child who interacts as she acquires the three basic components of the dialogism. / Esta produção teve como intuito acompanhar a emergência da língua enquanto instância multimodal em contextos de atenção conjunta vividos em situações naturalísticas de duas díades mãe-bebê, dos 07 aos 17 meses de vida da criança. Para isso trabalhamos com a perspectiva de envelope multimodal, ou seja, a mescla de três componentes da dialogia olhar, gestos e produção vocal que emergem concomitantemente. Tomamos como premissa a noção de multimodalidade proposta por McNeill (1985) como sendo a mescla das ações gesto-vocais. Os estudos em aquisição de linguagem e de comunicação não-verbal postulavam aportes teóricos a respeito de elementos lingüísticos, paralingüísticos e extralingüísticos de forma dissociada. Os primeiros tinham como primazia a observação da fala e da escrita de interlocutores em vários contextos. O segundo tipo era justificado como complemento do lingüístico e os elementos extralingüísticos eram considerados como acessórios usados como auxiliares da fala. Nossos resultados mostram que a mãe faz uso do plano de composição multimodal para dirigir-se à criança que, por sua vez, interage à medida que adquire os três componentes básicos da dialogia.

This master work has the objective to discuss the deitic gesture, observing like the indicate, element which is considered a communicative act, at the moment of its discharges, in classroom, it can contribute to the construction of knowledge, as helping in the interactive process between classroom speech participants - teacher and students. In this discussion work, we understand that the act of pointing out doesn t work as an identificatory behavior, but also like something which permits the construction of sense. We developed an ethnographic study in the speech which happened in a public school in the city of Maceió - AL. The corpus was definided by Sciences video recordings classes from the sixth grade basically studies, orthographic transcriptions and captivation of pictures. Among the gesture categories, we chose as the observation focus the deitic gesture or the indicate (CAVALCANTE, 1994; MONDADA, 2005) because this gesture turned an important element, catching the speakers attention (students) turning the access of the discursive topic more accessiful, knowed, motivated, justified, legitimating its introduction. Our investigation has the theorical base the studies of the non-verbal and verbal elements, centered on the Conversation Analyses. In this sense, we followed the contributions of Kerbrat-Orecchioni (2006), Marcuschi (1997), Knapp & Hall (1999), and others. For these studies, we also used a literature which treats reference phenomena and deixis, taking the dates provided by Mondada (2005), Levinson (2007), and others. The results pointed diversity in the referential-gesture action, which allowed us to get the following classification: 1) conventional indicating; 2) pointing with the hand; 3) pointing for insistention gesture; 4) pointing with all the hand and fingers semi-manageable; and 5) pointing with objects among the fingers. The types of observed indicates contributed to the teacher to barter the texts sense done by her, especially when it was necessary to emphasize a particular term of the discursive topics. Pedagogically, the referential-gesture actions helped the speakers involvement, because they get possible the construction of knowledge developing an interactive habitat where was possible the students learning. / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior / Este trabalho teve por objetivo analisar os gestos dêiticos, observando como o apontar, elemento que consideramos um ato comunicativo, no momento de sua deflagração, em sala de aula, pôde contribuir para a construção de conhecimento, bem como auxiliar no processo interativo entre os participantes do discurso escolar - professor e alunos. Partindo de uma perspectiva que entende que o ato de apontar não funciona apenas como um comportamento identificatório, mas também como algo que permite a construção de sentido, desenvolvemos um estudo de cunho etnográfico do discurso que aconteceu em uma escola pública da cidade de Maceió AL. O corpus foi definido por gravações em vídeo de aulas de Ciências da 6ª série do ensino fundamental, transcrições ortográficas e captações de imagens. Entre os muitos tipos de categorias gestuais, selecionamos como foco de observação o gesto dêitico ou de apontar (CAVALCANTE, 1994; MONDADA, 2005) pelo fato de esse gesto ter se mostrado um importante elemento, servindo para obter a atenção dos interlocutores (alunos), tornando o acesso ao tópico discursivo mais acessível, reconhecido, motivado, justificado, legitimando sua introdução. Nossa investigação teve como base teórica os estudos dos elementos não-verbais e verbais, centrados na Análise da Conversação. Nesse sentido, perseguimos as contribuições de Kerbrat-Orecchioni (2006), Marcuschi (1997), Knapp & Hall (1999), dentre outros. Fizemos uso também de uma literatura que trata dos fenômenos referenciais e da dêixis, tomando os dados fornecidos por Mondada (2005), Levinson (2007), dentre outros. Os resultados apontaram para uma diversidade na ação gestual-referencial, o que nos permitiu chegar à seguinte classificação: 1) apontar convencional; 2) apontar com toda a mão; 3) apontar para insistência gestual; 4) apontar com toda a mão e dedos semifletidos; e 5) apontar com objeto entre os dedos. Os tipos de apontar observados contribuíram para que a professora negociasse os sentidos dos textos por ela veiculados, principalmente, quando se fazia necessário destacar algum termo em particular dos tópicos discursivos. Pedagogicamente, as ações gestualreferenciais ajudaram no envolvimento dos interlocutores, uma vez que possibilitaram a construção de conhecimento, desenvolvendo um ambiente interativo propício à aprendizagem dos alunos.

Submitted by Jurema Lindote Botelho Peixoto (peixotojurema@gmail.com) on 2016-01-05T18:55:53Z No. of bitstreams: 1 Tese_JuremaPeixoto2015. pdf.pdf: 5392760 bytes, checksum: ea5024815f5611d9bee571ea91955bbb (MD5) / Approved for entry into archive by Maria Auxiliadora da Silva Lopes (silopes@ufba.br) on 2016-01-07T15:01:40Z (GMT) No. of bitstreams: 1 Tese_JuremaPeixoto2015. pdf.pdf: 5392760 bytes, checksum: ea5024815f5611d9bee571ea91955bbb (MD5) / Made available in DSpace on 2016-01-07T15:01:40Z (GMT). No. of bitstreams: 1 Tese_JuremaPeixoto2015. pdf.pdf: 5392760 bytes, checksum: ea5024815f5611d9bee571ea91955bbb (MD5) / CAPES / O objetivo desta tese foi compreender de que forma as ações viso-gestual-somáticas em Libras influenciam os esquemas mobilizados por estudantes surdos, durante a resolução de problemas. Optou-se pela Teoria dos Campos Conceituais de Gérard Vergnaud para o planeja-mento das situações e para a análise dos conteúdos contidos nos “esquemas”, conceito concebido por Jean Piaget e retomado por Vergnaud. Utilizaram-se aspectos teóricos relacionados com o potencial comunicativo e cognitivo dos gestos fundamentados em David McNeill e Susan Goldin-Meadow. Esta investigação foi realizada em duas fases: a primeira para conhecer os sujeitos da pesquisa em suas dificuldades, facilidades e interesses pela Matemática. Assim, foram entrevistados 10 estudantes surdos, matriculados no Ensino Médio de duas escolas públicas da cidade de Ilhéus-Bahia, bem como seus profissionais Tradutores Intérpretes da Língua Brasileira de Sinais (Libras) e seus professores de Matemática. Na segunda fase foram selecionados cinco estudantes surdos para desenvolver uma pesquisa qualitativa no design de estudo de caso múltiplo de cunho exploratório, descritivo e interpretativo, fundamentada numa análise microgenética associada à videografia. Apresentou-se em Libras aos estudantes, individualmente, 11 situações-problema que envolviam os significados da divisão: isomorfismo de medidas (8), comparação multiplicativa (2) e combinatória (1). A análise dos registros em vídeo e sua transcrição na forma de diálogos permitiram identificar os conhecimentos mobilizados pelos estudantes nos três registros de ação: Libras, gestos e produções escritas. Os estudantes apresentaram esquemas muito semelhantes, em maior ou menor grau de elaboração, fundamentados no raciocínio aditivo ou numa etapa intermediária entre o raciocínio aditivo e multiplicativo, independente da categoria da situação. Os conceitos-em-ação mobilizados comprovaram a predominância do raciocínio aditivo: adição repetida, subtração sucessiva, agrupamento, valor limite, cardinal de um número, correspondência biunívoca sinal-a-dedo, enumeração. Alguns teoremas-em-ação mobilizados também estavam associados à propriedade de isomorfismo para adição: f(x+x’+x”) = f(x)+f(x’)+f(x”). A diferença na ação desses sujeitos estava na forma de perceber, expressar e comunicar o conhecimento matemático por meio da Libras. Concluiu-se que as ações viso-gestual-somáticas em Libras foram constituindo, moldando e determinando os esquemas matemáticos dos estudantes de forma palpável e dinâmica. A análise evidenciou o quanto os estudantes surdos maximizam a parceria gesto-sinal nos esquemas. Os gestos deixaram o caráter de apenas acompanhante do sinal para fazer parte da organização da atividade, relacionando-se, reciprocamente, com os conceitos e teoremas-em-ação. Os resultados deste estudo apontam um método para avaliar os conhecimentos circunstanciais e em processo de mudança de surdos sinalizadores, ferramenta indispensável para professores e pesquisadores. Sugerem, ainda, que situações de ensino para esses estudantes deve valorizar a realização de gestos em coordenação com a Libras, o que exigirá um professor competente nessa língua, para promover a comunicação matemática significativa no contexto da inclusão. / ABSTRACT This thesis goal was to comprehend in what ways visual-gesture-somatic actions in sign lan-guage influence schemes created by deaf students while solving problems. It was opted for Gérard Vergnaud's Theory of Conceptual Fields to plan situations and analyze the contents in the "schemes", concept which was conceived by Jean Piaget and retaken by Vergnaud. It was used theoretical aspects related to the communicative and cognitive potentials of gestures which were grounded by David McNeill and Susan Goldin-Meadow. This research was achieved into two phases: the first one aimed to know the subjects of this research and their difficulties, easinesses and interests in Mathematics. Thus, 10 deaf high school students from two public schools were interviewed in Ilhéus-Bahia; as well as their Brazilian Sign Language (Libras) Interpreter professionals and their Mathematics teachers. In the second phase, five deaf students were selected to develop a qualitative research in a design of a study of multiple case with an explorative, descriptive and interpretative approaches, which are based on a mi-cro-genetics analysis associated to videography. It was individually presented to the students in Libras: 11 problem-situation that involved meanings of division: isomorphism of measures (8), multiplicative comparison (2) and combinatorial (1). The analysis of the records in video and its transcriptions into dialogues allowed us to identify the knowledge that was gotten by the students in the three records of action: Libras, gestures and writing productions. Students' schemes showed to be very similar to each other, either in a higher or in a lower level of elab-oration, based on summing reasoning or on a intermediate stage between multiplying and summing reasonings, regardless of the category of the situation. Concepts-in-action that were found proved the predominance of summing reasoning: repetitive addition, successive subtraction, grouping, value limit, cardinal number, singing-by-pointing bi-univocal correspond-ence, enumeration. Some mobilized theorems-in-action were also associated to the isomorphism property to addition f(x+x’+x”) = f(x)+f(x’)+f(x”). The difference in the subjects' execution was in the way of realizing, expressing and conveying mathematics knowledge through Libras. We concluded that visual-gestural-somatic actions in Libras were building, adjusting and determining the students' mathematical schemes palpably and dynamically. The analysis evidenced how deaf students maximize gesture-sign partnership in schemes. Gestures left the feature of accompanying signs to be part of the process of organizing the activity, relating reciprocally to the concepts and theorems-in-action. The results of this study shows a method to evaluate circumstantial knowledge in a process of changing signaling deaf individuals, an indispensable tool for professors and researchers. Moreover, it suggests that the situations used to teach these students must value the usage of gestures combined with Libras, what will require a proficient professor in the language to promote the significant mathematics communication in the context of inclusion.

Made available in DSpace on 2016-06-02T19:06:03Z (GMT). No. of bitstreams: 1 4988.pdf: 3663610 bytes, checksum: 1eb03927c23747c4a6420de5624f8571 (MD5) Previous issue date: 2013-10-22 / Universidade Federal de Sao Carlos / Multimodal interfaces are becoming popular and trying to enhance user experience through the use of natural forms of interaction. Among these forms we have speech and gestures inputs. Speech recognition is already a common feature in our daily basis but gesture recognition has just now being widely used as a new form of interaction. The Brazilian Sign Language (Libras) was recently recognized as a legal way of communication since the Brazilian Government enacted the law N˚10.436 on 04/24/2002, and also has recently became an obligatory subject in teachers education and an elective subject in undergraduate courses through the enactment N˚5.626 on 12/22/2005. In this context, this dissertation presents a study of all the steps that are necessary to achieve a complete system to recognize Static and Dynamic gestures of Libras, being these steps: Segmentation; Modeling and Interpretation; and Classification. Results and proposed solutions will be presented for each one of these steps, and the system will be evaluated in the task of real-time recognition of static and dyamic gestures within a finite set of Libras gestures. All the solutions presented in this dissertation were embedded in the software GestureUI, in which the main goal is to simplify the research in the field of gesture recognition allowing the communication with multimodal interfaces through a TCP/IP protocol. / Interfaces multimodais estão cada vez mais populares e buscam a interação natural como recurso para enriquecer a experiência do usuário. Dentre as formas de interação natural, estão a fala e os gestos. O reconhecimento de fala já está presente em nosso dia a dia em variadas aplicações, porém o reconhecimento de gestos apareceu recentemente como uma nova forma de interação. A Linguagem Brasileira de Sinais (Libras) foi recentemente reconhecida como meio de comunicação e expressão através da Lei N˚10.436 de 24/04/2002, e também foi incluída como disciplina obrigatória em cursos de formação de professores e optativa em cursos de graduação através do Decreto N˚5.626 de 22/12/2005. Neste contexto, esta dissertação apresenta um estudo sobre todas as etapas necessárias para a construção de um sistema para reconhecimento de Gestos Estáticos e Dinâmicos da Libras, sendo estas: Segmentação; Modelagem e Identificação; e Reconhecimento. Resultados e soluções propostas serão apresentados para cada uma destas etapas, e o sistema será avaliado no reconhecimento em tempo real utilizando um conjunto finito de gestos estáticos e dinâmicos. Todas as soluções apresentadas nesta dissertação foram encapsuladas no Software GestureUI, que tem por objetivo simplificar as pesquisas na área de reconhecimento de gestos permitindo a comunicação com interfaces multimodais através de um protocolo TCP/IP.

Submitted by Viviane Lima da Cunha (viviane@biblioteca.ufpb.br) on 2016-07-27T13:00:37Z No. of bitstreams: 1 arquivototal.pdf: 2786590 bytes, checksum: 78ef8677e696433a749f7ec4fc68899c (MD5) / Made available in DSpace on 2016-07-27T13:00:37Z (GMT). No. of bitstreams: 1 arquivototal.pdf: 2786590 bytes, checksum: 78ef8677e696433a749f7ec4fc68899c (MD5) Previous issue date: 2015-12-09 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior - CAPES / Teaching act, understood as a work, is something that requires an understanding of the multidimensionality constitutive of teaching activity, considered by a sociointeractionist view, which allows to evaluate the individual actions as a reflection of their conceptions/representations built and/or acquired in the social environment. This research focuses on the epistemological approach of the Sociodiscursive Interactionism (SDI) and its main theoretical and methodological contributions, with the assumptions of Bronckart (1999; 2006; 2008); the Work Sciences (the Ergonomy and the Clinic of Activity) , the studies of Clot (2007; 2010); Nouroudine (2002) and Amigues (2004); and Education theories specifically regarding the Didactics, with studies of Tardif (2014); Chevallard (1991; 2013); Aeby-Daghé & Dolz (2008) and Schneuwly (2000). The investigation of this research is focused on the act of the literacy-teacher who works in the Brazil Literacy Programme (Programa Brasil Alfabetizado - PBA). The goal is to understand the teaching practice of literacy-teacher in the context of Youth and Adult Education (Educação de Jovens e Adultos – EJA), considering the relationship between the didactic gestures and teaching knowledge presented in their conceptions and their performances. This aim, based on this relation, is to investigate to what extension an analysis of literacy-teachers’ act in teaching young and old students can reveal their knowledge, specific gestures and practices. In this research, there are two collaborators who work in the PBA at urban schools, in the municipality of Jacaraú-PB. The adopted methodological approach consists of three stages of analysis, including the represented/interpreted work and the performed work. Thus, the collection and provision of data necessarily were carried out through, firstly semi structured interviews to check the teachers’ conceptions and their implied knowledge; secondly, filming three classes of each collaborator to check and categorize didactic gestures mobilized by them. Thirdly, a simple self-confrontation session with both literacy-teachers in order to get their interpretations of the implemented pedagogical act. With all the data, each stage was analyzed separately, using as categories, the thematic content and the linguistic-discursive materialization proposed by the SDI, in Machado and Bronckart (2009), in addition to the founding didactic gestures defined by Aeby-Daghé & Dolz (2008). In the end, there was a triangulation of data, bringing together all realization, in order to get a more accurate view of the investigated object. As conclusions, it was found that there are eight evidenced conceptions in the literary-teachers of the PBA, which are in the base of their specific didactic gestures’ performance. In addition, the interpretations of their own act reveal that the higher is the teaching experience, the higher is the tendency of the educator to shield him/herself and avoid explicitly self-reflections that expose his/her weaknesses and unexpected actions in their pedagogical activity. Therefore, as a result of all the analysis after triangulation, it was found that experiential knowledge derived from practice in the classroom is what permeates and guides the generation, doing and interpretation of these literacy-teachers of young people and adults. This fact confirms the thesis that pedagogical practice of the literacy-teachers of young and adult students in the Literate Brazil Program is permeated by didactic gestures and acquired and (re)focused knowledge, mainly in / by the experience in the classroom. / O agir docente, entendido como trabalho, é algo que requer uma compreensão da multidimensionalidade constitutiva da atividade de ensino, vista por uma ótica sociointeracionista, a qual permite avaliar as ações dos indivíduos como sendo reflexo de suas concepções/representações construídas e/ou adquiridas no social. A presente pesquisa centra-se nessa abordagem epistemológica e tem como principais aportes teórico-metodológicos o Interacionismo Sociodiscursivo – ISD, com os pressupostos de Bronckart (1999; 2006; 2008); as Ciências do Trabalho (Ergonomia e Clínica da Atividade), com os estudos de Clot (2007; 2010); de Nouroudine (2002) e de Amigues (2004); e as Teorias da Educação, especificamente, relativas à Didática, com os estudos de Tardif (2014); Chevallard (1991; 2013); Aeby-Daghé & Dolz (2008) e Schneuwly (2000). O objeto de investigação é o agir do professor-alfabetizador de Jovens e Adultos atuante no Programa Brasil Alfabetizado (PBA). O objetivo central é compreender a prática pedagógica dos professores-alfabetizadores em contexto de EJA, considerando a relação entre os gestos didáticos e os saberes docentes presentes em suas concepções e realizações do agir. Tal objetivo resulta da problemática que é investigar em que medida uma análise do agir docente do alfabetizador de jovens e adultos pode revelar saberes, gestos e práticas específicas desse professor. Participam da pesquisa dois professores colaboradores que atuam no PBA, no município de Jacaraú-PB, em escolas da zona urbana. O percurso metodológico adotado é composto de três momentos de análise, incluindo o trabalho representado/interpretado e o trabalho realizado. Assim, a constituição dos dados correspondeu necessariamente a tal percurso, a saber, primeiro, a realização de entrevistas semiestruturadas para verificar as concepções docentes e os saberes nelas implicados; segundo, a filmagem de três aulas de cada colaborador para verificar e categorizar os gestos didáticos por eles mobilizados; e terceiro, uma sessão de autoconfrontação simples com ambos os alfabetizadores a fim de obter as suas interpretações acerca do agir pedagógico implementado. De posse do conjunto dos dados, fez-se a análise de cada etapa, separadamente, utilizando como categorias o nível do conteúdo temático e o da materialização linguístico-discursiva propostos no quadro do ISD, conforme Machado e Bronckart (2009), além dos gestos didáticos fundadores definidos por Aeby-Daghé & Dolz (2008). Ao final, fez-se uma triangulação dos dados, reunindo todas as constatações, com o propósito de obter uma visão mais apurada do objeto investigado. Como conclusões, verificou-se a existência de oito concepções docentes evidenciadas no dizer dos alfabetizadores do PBA, as quais estão na base da realização dos seus gestos didáticos específicos. Além disso, as interpretações do próprio agir feitas pelos respectivos professores revelam que, quanto maior a experiência docente, mais o educador tende a evitar explicitamente autorreflexões que desvelem as fragilidades e os imprevistos do seu agir professoral. Portanto, como desdobramentos de todas as análises, após a triangulação, ficou constatado que os saberes experienciais oriundos da prática em sala de aula são o que perpassa e orienta tanto o conceber, quanto o fazer e o interpretar desses alfabetizadores de pessoas jovens e adultas. Esse fato serviu para confirmar a tese de que a prática pedagógica do alfabetizador de jovens e adultos atuante no Programa Brasil Alfabetizado é permeada por gestos didáticos e saberes docentes adquiridos e (re)orientados, sobretudo, na/pela vivência em sala de aula.

Submitted by Maike Costa (maiksebas@gmail.com) on 2017-03-29T13:59:36Z No. of bitstreams: 1 arquivototal.pdf: 5041346 bytes, checksum: 32393622284defe42a4edeaa3e9c4a7b (MD5) / Made available in DSpace on 2017-03-29T13:59:36Z (GMT). No. of bitstreams: 1 arquivototal.pdf: 5041346 bytes, checksum: 32393622284defe42a4edeaa3e9c4a7b (MD5) Previous issue date: 2015-08-14 / The present study aims to observe the course of oral language acquisition in its multi-system in children's stories genre, that is, to describe how the acquisition has come about observing the orality in its multi-system: gestures and speech in order to realize the importance of gestures in the discursive construction. For this, we have conducted a longitudinal research having as subject 6 (six) children from early childhood education, from 2 (two) to 5 (five) years old, in which 4 (four) of them male and 2 (two) female. A municipal day care center located in the city of Campina Grande-PB was the place selected for the study. Data were collected during six months, from the thirteenth of March, 2013 to the Twenty-third of August, 2013, precisely once a week, from records written by the researcher, as well as recordings in the camcorder. There were 55 filming sessions, representing an average of 2h 2min 53s hours, considering that each child tell more than one story. For analytical purposes, only the story of Little Red Riding Hood was considered, since children, mostly, showed more interest in this story. Thus, the sessions that built up this research corpus are in number of 12, totaling 24 min 04s. For research purpose, we analyze the multi-system in children's oral narratives productions in retelling stories situations. In data processing, we contemplate the development of the child's narrative discourse considering the discursive and gestural elements present in the speech. We have approached studies involving language acquisition in our theoretical trajectory, considering as background for this research the socio-interactive bases, supported by Tomasello (2003), Bruner (1983, 1997), Vygotsky (1991, 2005) Cavalcante (1994, 1999, 2003, 2010), Faria (2002, 2004), Del Ré (2006), Del Ré, Paula e Mendonça (2014a, 2014b), among others. In addition, we have conducted a study on orality multi-system: gestures and speech based on McNeill (1974, 1985, 1992, 2000) and Kendon (1981, 2000). Studies on children's narratives were also addressed in this research based on Perroni (1992), François (1996, 2009) and Bruner (1997, 1998, 2001). We have assumed that construction of narrative discourse by young children is by interaction with others, with gestures as intrinsic elements in the narrative process. From this perspective, the gestures compose the linguistic assisting in the narrative construction, thus having a crucial role in structuring oral speech, which was observed in our data. The results point that in every scene, having or not a language proficiency, children have narrative competence. A competence that goes from the holophrastic statement to the narrative autonomy, in a movement that interweaves voices and gestures forming a whole discourse. Thus, the child, since childhood, here shown from two years, two months and eighteen days (2;2:18), already constituted as narrator, since relying on multimodal elements and under the supervision of the researcher can weave the narrative thread, in a discursive movement that mixes gestures and speech. / Esta pesquisa tem como objetivo observar o percurso da aquisição oral em seus multissistemas no gênero histórias infantis, isto é, descrever como se dá a aquisição observando a oralidade em seus multissistemas: gestos e fala com o propósito de perceber a importância dos gestos na construção discursiva. Para isso, realizamos uma pesquisa longitudinal tendo como sujeitos 6 (seis) crianças da Educação Infantil, especificamente de 2 (dois) a 5 (cinco) anos de idade, sendo 4 (quatro) do sexo masculino e 2 (dois) do sexo feminino. A unidade selecionada para o estudo foi uma creche municipal localizada em município de Campina Grande-PB. Os dados foram coletados durante seis meses, de 13 de março de 2013 a 23 de agosto de 2013, especificamente, uma vez por semana, a partir de registros escritos pela pesquisadora, bem como por gravações em câmera de vídeo. Foram 55 sessões de filmagens, correspondendo uma média de 2h 2 min 53s horas, considerando que cada criança contou mais de uma história. Para efeito de análise, só consideramos a história de Chapeuzinho Vermelho, uma vez que as crianças, em sua maioria, mostraram mais interesse por essa. Assim, as sessões que compõem o corpus da pesquisa são em número de 12, totalizando 24 min 04s. Para efeito de investigação, analisamos os multissistemas nas produções de narrativas orais das crianças em situações de reconto de histórias. No tratamento dos dados contemplamos o desenvolvimento do discurso narrativo da criança considerando os elementos discursivos e gestuais presentes nesse discurso. Em nossa trajetória teórica, abordamos estudos que envolvem a aquisição da linguagem, considerando como pano de fundo para a pesquisa as bases sociointerativas, tendo como suporte Tomasello (2003), Bruner (1983,1997), Vygotsky (1991,2005), Cavalcante (1994, 1999, 2003, 2010), Faria (2002, 2004), Del Ré (2006), Del Ré, Paula e Mendonça (2014a, 2014b), dentre outros. Somada a isso, realizamos um estudo sobre os multissistemas da oralidade: gestos e fala com base em McNeill (1974, 1985, 1992, 2000) e Kendon (1981, 2000). Estudos sobre as narrativas infantis também foram abordados nesta pesquisa com base em Perroni (1992) François (1996, 2009) e Bruner (1997, 1998, 2001). Partimos da hipótese que a construção do discurso narrativo pelas crianças pequenas se dá pela interação com o outro, tendo os gestos como elementos intrínsecos do processo narrativo. Nessa perspectiva, os gestos integram o linguístico auxiliando na construção da narrativa, tendo assim um papel crucial na estruturação do discurso oral, o que foi constatado em nossos dados. Os resultados apontaram, em todas as cenas, que independentemente de ter uma proficiência linguística, as crianças possuem competência narrativa. Uma competência que vai desde o enunciado holofrástico à autonomia narrativa, num movimento que entrelaça vozes e gestos formando um todo discursivo. Assim, a criança, desde pequena, aqui evidenciado a partir de dois anos, dois meses e dezoito dias (2;2.18), já constitui-se enquanto narradora, uma vez que apoiando-se em elementos multimodais e sob a tutela da pesquisadora, consegue tecer o fio narrativo, num movimento discursivo que mistura gestos e fala.

CoordenaÃÃo de AperfeiÃoamento de NÃvel Superior / Nos Ãltimos anos a capacidade de processamento dos dispositivos portÃteis tÃm aumentado muito, permitindo-lhes processar aplicaÃÃes, tais como jogos, antes somente possÃveis em plataformas de maior poder computacional. PorÃm, a interface com o usuÃrio nÃo tem acompanhado essa evoluÃÃo do poder computacional, sendo realizada ainda por meio de teclados nÃo ergonÃmicos. Esta dissertaÃÃo propÃe um sistema de interaÃÃo para dispositivos portÃteis baseado em VisÃo Computacional. Este sistema rastreia a mÃo do usuÃrio e reconhece seis possÃveis gestos: apontamento, zoom in, zoom out, rotaÃÃo horÃria, rotaÃÃo anti-horÃria e arrastar. Inicialmente o sistema captura imagens da mÃo do usuÃrio, aplica filtros de prÃ-processamento sobre estas e segmenta a regiÃo da pele atravÃs de limiarizaÃÃo. Feito isto, o contorno da mÃo à extraÃdo e representado em um vetor pelo algoritmo do cÃdigo em cadeia. As pontas dos dedos sÃo localizadas a partir do contorno representado e, atravÃs de um conjunto de regras, o gesto realizado pelo usuÃrio à reconhecido. O sistema proposto à simulado utilizando a plataforma Simulink e implementado em linguagem C ANSI. AlÃm disto, este sistema à comparado com trÃs outros sistemas descritos na literatura com base em quatro critÃrios de avaliaÃÃo: custo computacional, invariÃncia à rotaÃÃo para o gesto de apontamento, robustez à presenÃa de regiÃes no fundo da imagem com cor prÃxima à da pele e robustez à oclusÃo com regiÃes de cor prÃxima à da pele. Os resultados indicam que este sistema atende os requisitos dos critÃrios de avaliaÃÃo, portanto, sendo possÃvel sua utilizaÃÃo em dispositivos portÃteis.