Mémoire numérisé par la Direction des bibliothèques de l'Université de Montréal. / Ce mémoire présente le développement d'une stratégie de testing informatisée et interactive, centrée sur le diagnostic pédagogique dans le contexte de la classe. La nouvelle stratégie d'administration d'un test a été intégrée à un système de tests adaptatifs existant, conçu pour répondre à un besoin d'outils pour revaluation formative qui respectent les contraintes organisationnelles du milieu scolaire québécois. Le système développé a pour but de renseigner rapidement renseignant et l'élève de l'état des apprentissages de celui-ci sans délai, afin que renseignant puisse entreprendre des interventions correctives efficaces auprès des élèves. Le système de tests réalisé administre un test en deux phases. La première phase fournit un diagnostic structurel ainsi qu'une hypothèse du diagnostic causal reflétant les apprentissages d'un élève. La seconde phase du test permet d'établir un niveau de cohérence d'un élève présentant une difficulté cognitive préalablement identifiée dans la première phase et de communiquer ce diagnostic causal sous la forme d'un message qualitatif pour renseignant. Pour répondre aux objectifs de la première phase du test, nous avons modifié la programmation de la stratégie "stradaptative" existante pour la rendre plus flexible et indépendante des banques d'items. Nous avons procédé à la verification de l'algorithme de sélection des items "stradaptatif" par une étude de vérification simulant différents profils d'élèves. Pour répondre aux objectifs de la seconde phase, nous avons convenu d'utiliser la catégorie de leurres la plus fréquemment choisie par l'élève lors de la première phase du test comme élément d'information pour la seconde phase. Nous avons ajouté au système de tests diagnostiques existant, une stratégie de selection adaptative des items selon un modèle Rasch nécessaire pour estimer le niveau de difficulté cognitive de l'élève face à une catégorie de leurres donnée. n IV Nous avons établi, à partir des résultats des études de simulations, des intervalles de confiance pour les thêta moyens estimés correspondant à des niveaux de difficulté cognitive et des profils d'élèves différents. A partir de ces intervalles, nous avons défini trois niveaux de messages diagnostiques exprimant le niveau de cohérence de l'élève à choisir une catégorie de leurres donnée : la difficulté n'est pas cohérente, la difficulté présente un certain degré de cohérence, la difficulté est cohérente. Le diagnostic structurel et le diagnostic causal sont accessibles immédiatement après la passation du test par l'entremise de la fiche diagnostique individuelle de l'élève. Cette recherche a permis d'intégrer dans un même système de tests, la stratégie "stradaptative" dont la programmation a été rendue indépendante du contenu des banques et une stratégie complémentaire de sélection des items utilisant le modèle de Rasch qui permet de déterminer un niveau de cohérence de l'élève à choisir une certaine catégorie de leurres.

Mémoire numérisé par la Division de la gestion de documents et des archives de l'Université de Montréal.

Mémoire numérisé par la Division de la gestion de documents et des archives de l'Université de Montréal

No description available.

La présente recherche questionne l’évaluation de la compréhension de textes et s’intéresse aux indicateurs linguistiques observables dans des réponses à des questions de compréhension de textes posées après la lecture silencieuse de textes narratifs courts à des élèves du cycle 3 (8-11 ans). Elle s’inscrit dans un contexte de vives préoccupations à l’égard des difficultés de compréhension des élèves entrant au collège et de l’intégration des nouvelles technologies dans les pratiques scolaires. Cette recherche propose de s’appuyer sur une approche linguistique de l’acquisition du langage écrit appliquée à l’acte d’évaluation de la compréhension de textes. Pour cela, elle propose un dispositif d’évaluation sur support papier et ordinateur contenant deux textes narratifs courts et des questions de compréhension de ces textes. Les textes ont été analysés pour dégager des indicateurs de complexité qui ont ensuite permis d’effectuer des analyses linguistiques des données écrites recueillies auprès de trois classes d’élèves du cycle 3. De manière générale, les résultats ont permis d’identifier des indicateurs linguistiques de compréhension ainsi que des procédés d’élaboration des réponses formulées par les élèves pour montrer ce qu’ils ont compris et comment ils se servent des textes pour répondre aux questions. Une étude longitudinale plus détaillée des réponses de trois élèves permet de proposer une méthodologie d’évaluation linguistique de la compréhension de textes. Ce travail offre des pistes de réflexion sur l’apport d’une conception linguistique de l’évaluation de la lecture et offre un modeste éclairage sur l’apport des TIC pour une évaluation formative. / The present research deals with the assessment of the comprehension of short narrative written texts by 8 to 11 year old pupils and endeavours to analyse linguistic indicators which can be identified in their written answers to questions after silent reading of those texts. The context is one of anxiety over reading comprehension difficulties of pupils entering 6th grade and also of the integration of new information technologies in school practices. This research argues for a linguistic approach of written language acquisition applied to the assessment of reading comprehension. In this context an assessment device is proposed both on paper and on computer, including two short narrative texts as well as comprehension questions about those texts. The texts were analysed to identify linguistic complexity indicators which helped analysing the written data collected from three classes. Overall, the results enabled us to identify linguistic comprehension indicators as well as ways of formulating answers by which the pupils showed what they understood and the ways they used the texts to answer the questions. A close longitudinal study of three pupils’ answers enable us to propose a linguistic method for assessing text comprehension. This work invites reflection on a linguistic conception of comprehension assessment and offers a modest contribution to understanding the role Computer resources may play in formative evaluation. Key-words : reading comprehension, formative evaluation, linguistic comprehension indicators, software, teaching and learning of reading, 8 to 11 year old pupils.

L’objectif du présent mémoire consiste à évaluer les qualités métrologiques de l’outil d’évaluation formative destiné à évaluer la compétence à lire et apprécier des textes variés en français au secondaire Québécois. À cet effet, un outil d’évaluation comportant treize items a été élaboré et testé auprès de six cents deux ( n = 602 ) élèves du premier cycle du secondaire de quatre commissions scolaires des régions de Québec, Portneuf et Shawinigan. Il ressort des analyses que sur les treize items composant l’outil d’évaluation, douze possèdent un pouvoir discriminant et un niveau de facilité acceptable et méritent d’être conservés dans l’outil. Un item possède un niveau de discrimination jugé non acceptable et devrait, par conséquent, être revu, notamment la grille d’évaluation. Ces résultats démontrent que le test d’évaluation formative élaboré est prometteur compte tenu de des qualités métrologiques qu’il a démontrées. / The purpose of this study is to evaluate the measurement characteristics of the formative assessment tool whose objective is to assess the competence to read and understand a variety of french texts in Quebec secondary school. For this purpose, an assessment tool consisting of thirteen items has been developed and a test of this tool has been conducted among six hundred and two (n = 602) students of the first cycle of secondary school in four school boards of the regions of Quebec City, Portneuf and Shawinigan. The analysis show that twelve out of the thirteen items of the assessment tool, have an acceptable discrimination parameter and an acceptable level of ease and should be kept in the tool. An item has a level of discrimination found not acceptable and should therefore be reviewed, including the evaluation grid. These results demonstrate that the formative assessment tool developed is promising considering measurement characteristics it has shown.

Au cours des dernières années, les pratiques de l’évaluation comme aide à l’apprentissage (c’est-à-dire l’auto-évaluation, l’évaluation par les pairs, la rétroaction) dans la salle de classe ont été de plus en plus considérées comme des éléments essentiels (Black & Wiliam, 1998; Harlen & Winter, 2004; van de Watering & van der Rijt, 2006). Cependant, dans le domaine de l’apprentissage d’une langue seconde la recherche sur ce sujet est plutôt limitée. En nous fondant sur les études de Colby-Kelly et Turner (2007) et de Lyster et Ranta (1997), nous avons mené une recherche exploratoire visant à combler ce besoin. L’objectif général était de comprendre comment l’évaluation formative se réalise dans deux cours d’anglais intermédiaire à l’Université de Montréal, et de comparer comment ces pratiques sont perçues et vécues par la professeure et ses étudiants. Trois questions de recherche étaient posées: 1. Quelle est la nature de l’évaluation formative dans une salle de classe d’anglais langue seconde? 2. Est-ce que les pratiques de la professeure reflètent ce qu’elle pense de l’évaluation formative? 3. Quels sont les correspondances et différences entre les croyances de la professeure et les perceptions de ses étudiants quant aux bénéfices de l’évaluation formative pour l’apprentissage de l’anglais langue seconde? La collecte de données comprend des observations en classe, des entrevues auprès de la professeure et des questionnaires pour les étudiants. Pour répondre à notre première question de recherche, nous avons analysé la rétroaction donnée par la professeure pendant une production orale réalisée par ses étudiants à partir de la typologie de feedback et de uptake de l’étude de Lyster et Ranta (1997). En ce qui a trait à la deuxième question de recherche, nous avons fait des entrevues avec la professeure en vue d’expliciter ses perceptions relativement à l’évaluation formative. À la fin du trimestre, nous avons comparé ses réponses avec sa pratique à partir des enregistrements vidéo produits en classe. Finalement, pour répondre à notre dernière question de recherche nous avons comparé les réponses données par la professeure aux entrevues avec les réponses des étudiants à un questionnaire adapté à partir de celui de Colby-Kelly et Turner. Finalement, nous présentons et discutons les résultats les plus significatifs obtenus dans cette étude qualitative Nous concluons cette thèse en proposant de avenues pour des recherches futures. / During the last twenty years, assessment practices for improving student learning (i.e., self-assessment, peer assessment, feedback) in the classroom has been considered as essential (Black & Wiliam, 1998; Harlen & Winter, 2004; van de Watering & van der Rijt, 2006). In the field of second language learning, however, research in this area is quite limited. In order to address this gap, an exploratory research , based on Colby-Kelly and Turner’s (2007) and Lyster and Ranta’s (1997)studies has been conducted . The general objective was to understand how formative assessment is practiced in two Intermediate Oral English courses at the Université de Montréal and to compare how these practices are perceived and performed by the teacher and the students. Three research questions were pursued: 1. What is the nature of formative assessment in a second language classroom setting? 2. Do the teacher’s assessment practices reflect what she thinks about formative assessment? 3. What are the coincidences and differences between teacher’s perceptions and her students’ perceptions regarding the benefits of formative assessment for learning English? Data collection instruments consist of teacher interview guidelines, students’ questionnaire and classroom observation grids. In order to answer the first question, the feedback given by the teacher during the students’ oral performance has bee analysed using the types of feedback and uptake in Lyster and Ranta’s (1997) report. For the second research question, I interviewed the teacher at the beginning of each session and I elicited her beliefs about classroom-based formative assessment practice. At the end of the session I the teacher’s answers have beeb compared and contrasted with her actual performance, which was videotaped during the course. Finally, regarding the third question, teacher’s answers in the interviews have been compared with students’ answers on a questionnaire – adapted from Colby-Kelly and Turner’s one. The most significant results of this qualitative research are presented and discussed. In the conclusion, directions for future research are proposed

Au cours des dernières années, les pratiques de l’évaluation comme aide à l’apprentissage (c’est-à-dire l’auto-évaluation, l’évaluation par les pairs, la rétroaction) dans la salle de classe ont été de plus en plus considérées comme des éléments essentiels (Black & Wiliam, 1998; Harlen & Winter, 2004; van de Watering & van der Rijt, 2006). Cependant, dans le domaine de l’apprentissage d’une langue seconde la recherche sur ce sujet est plutôt limitée. En nous fondant sur les études de Colby-Kelly et Turner (2007) et de Lyster et Ranta (1997), nous avons mené une recherche exploratoire visant à combler ce besoin. L’objectif général était de comprendre comment l’évaluation formative se réalise dans deux cours d’anglais intermédiaire à l’Université de Montréal, et de comparer comment ces pratiques sont perçues et vécues par la professeure et ses étudiants. Trois questions de recherche étaient posées: 1. Quelle est la nature de l’évaluation formative dans une salle de classe d’anglais langue seconde? 2. Est-ce que les pratiques de la professeure reflètent ce qu’elle pense de l’évaluation formative? 3. Quels sont les correspondances et différences entre les croyances de la professeure et les perceptions de ses étudiants quant aux bénéfices de l’évaluation formative pour l’apprentissage de l’anglais langue seconde? La collecte de données comprend des observations en classe, des entrevues auprès de la professeure et des questionnaires pour les étudiants. Pour répondre à notre première question de recherche, nous avons analysé la rétroaction donnée par la professeure pendant une production orale réalisée par ses étudiants à partir de la typologie de feedback et de uptake de l’étude de Lyster et Ranta (1997). En ce qui a trait à la deuxième question de recherche, nous avons fait des entrevues avec la professeure en vue d’expliciter ses perceptions relativement à l’évaluation formative. À la fin du trimestre, nous avons comparé ses réponses avec sa pratique à partir des enregistrements vidéo produits en classe. Finalement, pour répondre à notre dernière question de recherche nous avons comparé les réponses données par la professeure aux entrevues avec les réponses des étudiants à un questionnaire adapté à partir de celui de Colby-Kelly et Turner. Finalement, nous présentons et discutons les résultats les plus significatifs obtenus dans cette étude qualitative Nous concluons cette thèse en proposant de avenues pour des recherches futures. / During the last twenty years, assessment practices for improving student learning (i.e., self-assessment, peer assessment, feedback) in the classroom has been considered as essential (Black & Wiliam, 1998; Harlen & Winter, 2004; van de Watering & van der Rijt, 2006). In the field of second language learning, however, research in this area is quite limited. In order to address this gap, an exploratory research , based on Colby-Kelly and Turner’s (2007) and Lyster and Ranta’s (1997)studies has been conducted . The general objective was to understand how formative assessment is practiced in two Intermediate Oral English courses at the Université de Montréal and to compare how these practices are perceived and performed by the teacher and the students. Three research questions were pursued: 1. What is the nature of formative assessment in a second language classroom setting? 2. Do the teacher’s assessment practices reflect what she thinks about formative assessment? 3. What are the coincidences and differences between teacher’s perceptions and her students’ perceptions regarding the benefits of formative assessment for learning English? Data collection instruments consist of teacher interview guidelines, students’ questionnaire and classroom observation grids. In order to answer the first question, the feedback given by the teacher during the students’ oral performance has bee analysed using the types of feedback and uptake in Lyster and Ranta’s (1997) report. For the second research question, I interviewed the teacher at the beginning of each session and I elicited her beliefs about classroom-based formative assessment practice. At the end of the session I the teacher’s answers have beeb compared and contrasted with her actual performance, which was videotaped during the course. Finally, regarding the third question, teacher’s answers in the interviews have been compared with students’ answers on a questionnaire – adapted from Colby-Kelly and Turner’s one. The most significant results of this qualitative research are presented and discussed. In the conclusion, directions for future research are proposed

No description available.

À travers la francophonie, l’évaluation formative est considérée par plusieurs chercheurs comme un facteur clé du développement de la compétence à communiquer oralement : elle favorise notamment la régulation des apprentissages (Colognesi, Vassart et al., 2020) et tend à diminuer le stress des apprenants à l’égard des présentations orales (Paquet, 2021). Pourtant, l’évaluation formative de l’oral est quasi absente des pratiques évaluatives des enseignants de français langue d’enseignement au niveau secondaire au Québec (Lafontaine et Messier, 2009; Vega, 2013). De plus, la coévaluation, moyen susceptible d’être mobilisé dans le cadre d’une évaluation formative de l’oral, semble méconnue des enseignants (Dumais, 2008; Sénéchal, 2012) et peu d’études ont été menées à son sujet. C’est pourquoi nos deux objectifs spécifiques sont les suivants : 1) mesurer des effets de la coévaluation formative sur le développement de la compétence à communiquer oralement d’élèves du secondaire; 2) décrire des raisons pouvant expliquer ces effets. Pour atteindre ces objectifs, nous avons réalisé une recherche par méthodes mixtes auprès de trois groupes-classes de première secondaire (élèves âgés de 12 et 13 ans). Une séquence d’enseignement a été mise en place, laquelle comprend l’ajout d’une coévaluation formative élève – élève dans le groupe expérimental 1 et d’une coévaluation formative enseignante – élève dans le groupe expérimental 2. Les données issues d’un prétest et un posttest ont fait l’objet de tests statistiques et les données découlant d'entrevues semi-dirigées ont été analysées à l’aide d’une analyse de contenu. En lien avec le premier objectif, les résultats saillants indiquent que les deux modalités de coévaluation expérimentées produisent un effet d’amélioration similaire. Concernant le deuxième objectif, la coévaluation élève – élève semble être un levier pour la motivation intrinsèque des élèves, les amenant à se sentir responsables de leurs apprentissages et à consacrer plus de temps à la préparation de leur exposé. La coévaluation enseignante – élève, pour sa part, favorise l’amélioration de la confiance en soi des apprenants, surtout lorsque ces derniers valorisent l’enseignante. Ces résultats offrent des pistes didactiques susceptibles de guider les enseignants dans la mise en place de leur propre démarche de coévaluation. / In francophone research areas, several researchers consider formative assessment to be a key factor in the development of oral communication skills. Most notably, it promotes self-regulated learning (Colognesi, Vassart, et al., 2020) and tends to reduce the stress associated with oral presentations in learners (Paquet, 2021). Despite this, formative oral assessment is nearly absent from the evaluation practices of French teachers in Quebec’s high schools (Lafontaine and Messier, 2009; Vega, 2013). Additionally, co-evaluation, an effective practice for formative oral assessment, seems to be unknown to most teachers (Dumais, 2008; Sénéchal, 2012) and few studies have been conducted on this matter. Therefore, our two specific objectives are: 1) to measure the effects of formative co-evaluation on the development of oral communications skills of high school students; 2) to describe possible reasons for these effects. To do so, we conducted a study based on a mixed methods research design among three groups of first-year high school students (12 to 13 years old). We created a teaching unit that included a student – student formative co-evaluation in experimental group 1 and a teacher – student formative co-evaluation in experimental group 2. Data collected from a pre-test and a post-test were statistically analyzed while data collected from semi-structured interviews were examined using a content analysis. With regards to the first objective, the main results indicate that the two methods of co-evaluation produce similar effects on improving oral communication skills. Concerning the second objective, student – student co-evaluation seems to promote intrinsic motivation which leads students to gain a sense of responsibility for their learning and spend more time getting ready for their presentation. Meanwhile, teacher – student co-evaluation helps improve self-confidence in learners, especially when the teacher is highly regarded by the students. These results offer various possible teaching avenues to guide teachers establishing their own co-evaluation procedure.