Return to search

Développement et validation d’un test de jugement situationnel pour mesurer le transfert des apprentissages des enseignants en gestion de classe

Les activités de développement professionnel sont essentielles pour amener les enseignants à développer ou consolider certaines compétences (Desmeules et al., 2017; Ministère de l'Éducation du Québec [MEQ], 2020; Mukamurera et al., 2013). Il est important d'évaluer leurs retombées sur les apprentissages et plus spécifiquement de vérifier si ceux-ci se transposent en emploi. Le transfert des apprentissages faits dans le cadre d'une formation est cependant rarement mesuré. Lorsqu'il l'est, c'est notamment au moyen d'instruments autorapportés, susceptibles de présenter certaines limites (p.ex. désirabilité sociale) (Desimone, 2009; Schoeb et al., 2021b). Différents auteurs (p.ex. Desimone, 2009; Gold et Holodynski, 2015) soulèvent le potentiel d'un outil situationnel, contextualisé à l'emploi, pour évaluer le transfert des apprentissages. Le test de jugement situationnel (TJS) est un instrument d'évaluation composé de mises en situation pour lesquelles le répondant doit généralement identifier le comportement qu'il adopterait parmi une liste préétablie. Reflétant des situations liées à l'emploi et possédant des qualités psychométriques intéressantes, le TJS semble un outil prometteur pour mesurer le transfert (Fritzsche et al., 2006; Gold et Holodynski, 2015). La présente recherche porte sur le développement d'un TJS pour mesurer le transfert des apprentissages d'enseignants au secondaire qui ont suivi de la formation en gestion de classe. Elle vise également à recueillir différents indices de validité afin de vérifier les qualités du TJS pour répondre à un tel objectif. Pour ce faire, plusieurs étapes ont été suivies selon les recommandations présentées dans la littérature scientifique portant sur le développement des TJS (p.ex. Lievens et al., 2008; Lothe et al., 2012; Weekley et al., 2006). D'abord, des entretiens semi-dirigés ont été menés auprès de 23 enseignants au secondaire afin de recueillir des exemples de situations de gestion de classe. Cela a permis de rédiger plusieurs vignettes présentant différentes catégories de comportements dérangeants chez les élèves. Ensuite, des experts en gestion de classe (p.ex. enseignants, conseillers pédagogiques) ont présenté, lors d'entretiens semi-dirigés, des comportements de différents niveaux d'efficacité pouvant être adoptés par l'enseignant pour répondre à chacune des situations. Ces réponses ont été analysées, puis, en collaboration avec des experts en gestion de classe, une clé de correction a été développée permettant d'identifier, pour chacune des vignettes, le comportement qu'adopterait la majorité des experts. À travers ce processus d'élaboration, différents prétests ont permis de vérifier la clarté et la pertinence des vignettes, notamment. D'autres indices appuyant la validité de contenu du TJS ont été obtenus. Ces différentes étapes ont ainsi permis de développer un TJS comportant 23 vignettes. Une première étude réalisée auprès de 71 enseignants au secondaire permet de vérifier les qualités psychométriques du TJS. Plus spécifiquement, les indices de difficulté et de discrimination ont permis de vérifier la qualité des vignettes et de retirer celles problématiques. Cette étape a mené au retrait de sept vignettes, menant ainsi à une version du TJS à 16 vignettes avec un cœfficient de consistance interne (alpha de Cronbach standardisé) de α = 0,61. Une deuxième étude réalisée auprès de 78 enseignants au secondaire ayant suivi une formation en gestion de classe dans les cinq dernières années permet de vérifier le lien entre le résultat au TJS et d'autres variables associées. Les résultats permettent de constater des liens positifs, significatifs et modérés entre le résultat au TJS et le résultat à des mesures visant à évaluer des conditions déterminantes du transfert des apprentissages (Blume et al., 2010; Grossman et Salas, 2011), soit l'utilité perçue de la formation et le sentiment d'efficacité personnelle (SEP). Le TJS entretient également un lien positif et significatif avec le transfert mesuré au moyen de l'« *Échelle multidimensionnelle du transfert des apprentissages* » (ÉMTA). Cependant, aucun lien significatif n'est obtenu entre le résultat au TJS et le résultat à la mesure de soutien de la direction ainsi qu'avec le transfert mesuré au moyen d'un item unique. La discussion présente une réflexion sur les apports de la démarche d'élaboration et de validation du TJS pour la littérature scientifique sur le transfert, le développement professionnel des enseignants et, finalement sur celle portant sur le TJS. Ce dernier chapitre aborde également des implications pratiques de la présente recherche, suggérant différentes utilisations du TJS à différents moments de la formation, soit avant, pendant et après. / Professional development activities are essential to help teachers develop or consolidate certain skills (Desmeules and al., 2017; ministère de l'Éducation du Québec, 2020; Mukamurera and al., 2013). It is important to assess their impact on learning and more specifically to examine whether such activities translate into the job context. However, the transfer of learning is rarely measured. When it is, it is usually through self-report instruments, which are likely to have certain limitations (e.g., social desirability) (Desimone, 2009; Schoeb and al., 2021b). Some authors (e.g., Desimone, 2009; Gold and Holodynski, 2015) raised the potential of using a situational tool, contextualized to the job, to assess the transfer of learning. The Situational Judgment Test (SJT) is an assessment instrument composed of scenarios for which the respondent must generally identify the behavior he would adopt from a pre-established list. Reflecting work-related situations and possessing interesting internal psychometric qualities, its potential as a measure of transfer should be explored (Fritzsche and al., 2006; Gold and Golodynski, 2015). This research proposes to develop a SJT to measure the transfer of learning from secondary school teachers who followed some training in classroom management. It also proposes to collect different validity evidence in order to verify the qualities of the SJT. To do this, several steps were followed in accordance with the recommendations presented in the scientific literature on the development of SJTs (e.g. Lievens and al., 2008; Lothe and al., 2012; Weekley and al., 2006). First, semi-structured interviews were conducted with 23 secondary school teachers to collect examples of classroom management issues. This lead to the development of several vignettes describing different categories of disturbing behavior among students. Then, experts in classroom management (e.g., teachers, pedagogical advisers) provided, during semi-structured interviews, examples of behaviors of different levels of effectiveness to respond to each situation. These responses were analyzed and, in collaboration with classroom management experts, lead to a correction keybased on the behavior that a majority of experts would adopt, for each of the vignettes. Various pre-tests were conducted to assess the clarity and relevance of the vignettes and to gather other evidence supporting the content validity of the SJT. These different steps have lead to a TJS comprising 23 vignettes. A first study conducted with 71 secondary school teachers makes it possible to verify internal psychometric qualities of the SJT. Difficulty and discrimination indices were used to assess the quality of the vignettes and remove problematic ones. This step led to the removal of seven vignettes, for a final SJT version of 16 vignettes, with an internal consistency coefficient (Cronbach's alpha) of α = 0.61. A second study conducted with school teachers who have followed a training in classroom management in the last five years allow to verify the links between the SJT results and other associated variables. The results show positive, significant, and moderate relations between the SJT scores and indicators of transfer of learning (Blume and al., 2010; Grossman and Salas, 2011), namely perceived usefulness of the training and self-efficacy (SEP). The SJT is also significantly related to transfer as measured by the « *Multidimensional Scale of the Transfer of Learning* » (EMTA). However, no significant relationship was observed between the SJT results and the score on the management support measure nor with transfer as measured by means of a single item. The discussion proposes a reflection on the contribution of the approach of development and validation of the SJT for the scientific literature on the transfer, the professional development of the teachers and, finally on that relating to the SJT. This last chapter also discusses the practical implications of the present research, thus suggesting different possible uses of the SJT at different times of training: before, during and after.

Identiferoai:union.ndltd.org:LAVAL/oai:corpus.ulaval.ca:20.500.11794/146584
Date15 July 2024
CreatorsDelobbe, Anne-Michèle
ContributorsJeanrie, Chantale, Lauzier, Martin
Source SetsUniversité Laval
LanguageFrench
Detected LanguageFrench
TypeCOAR1_1::Texte::Thèse::Thèse de doctorat
Format1 ressource en ligne (xii, 219 pages), application/pdf
Rightshttp://purl.org/coar/access_right/c_abf2

Page generated in 0.0021 seconds