Mémoire numérisé par la Direction des bibliothèques de l'Université de Montréal.

Le but de cette étude exploratoire est de déterminer si le test de concordance de script est un instrument capable de mesurer le raisonnement clinique d’étudiantes en formation et s’il peut déceler des différences entre le raisonnement clinique des novices et des expertes de la profession. Un TCS adapté au domaine des sciences infirmières et portant sur des champs particuliers de la pédiatrie a été administré à des candidates revendiquant différents niveaux d’expérience : des expertes du domaine (n=15), des infirmières (n=40) et des étudiantes de troisième année de formation (n=30). D’une durée de 20 minutes, le test a été pratiqué en ligne; il comptait 15 scénarios et 45 items au total. Les scores des étudiantes étaient significativement inférieurs aux scores des infirmières et des expertes. Le TCS est un instrument fiable et utile lorsqu’il s’agit de déterminer, en termes de raisonnement clinique, une différence de niveau entre la novice et l’experte.

Le but de cette étude exploratoire est de déterminer si le test de concordance de script est un instrument capable de mesurer le raisonnement clinique d’étudiantes en formation et s’il peut déceler des différences entre le raisonnement clinique des novices et des expertes de la profession. Un TCS adapté au domaine des sciences infirmières et portant sur des champs particuliers de la pédiatrie a été administré à des candidates revendiquant différents niveaux d’expérience : des expertes du domaine (n=15), des infirmières (n=40) et des étudiantes de troisième année de formation (n=30). D’une durée de 20 minutes, le test a été pratiqué en ligne; il comptait 15 scénarios et 45 items au total. Les scores des étudiantes étaient significativement inférieurs aux scores des infirmières et des expertes. Le TCS est un instrument fiable et utile lorsqu’il s’agit de déterminer, en termes de raisonnement clinique, une différence de niveau entre la novice et l’experte.

Résumé: Les signes de détérioration clinique chez les patients hospitalisés ne sont pas toujours détectés ou interprétés adéquatement, occasionnant des arrêts cardiaques, des transferts vers les unités de soins intensifs et des décès évitables. Afin de bien reconnaître les signes de détérioration clinique, les infirmières doivent avoir un raisonnement clinique adéquat. Évaluer le raisonnement clinique d’infirmières en contexte de détérioration clinique pourrait aider à identifier les difficultés associées à la reconnaissance de ses signes. A l’heure actuelle, il n’y a pas d’instrument de mesure disponible pour ce faire. Le test de concordance de script (TCS) est un instrument de mesure du raisonnement clinique qui pourrait être développé dans ce but. Cette étude méthodologique vise à élaborer un TCS évaluant le raisonnement clinique d’infirmières en contexte de détérioration clinique en milieu hospitalier et à évaluer ses qualités sychométriques, soit sa fidélité et sa validité, ainsi que son appréciation. Un TCS de 22 scénarios cliniques (88 items) a été conçu, puis administré à 47 infirmières au baccalauréat en sciences infirmières et 21 infirmières expertes. Douze des étudiantes ont rempli le test à nouveau pour un test-retest. Après son optimisation, il contenait 20 scénarios et 68 items. Il a obtenu un coefficient alpha de Cronbach de 0,76. L’étude de sa stabilité temporelle a révélé un coefficient de corrélation intra-classe modéré de 0,554 (p < 0,05). Les indices de la validité du contenu pour la pertinence et la clarté du TCS ont été de 0,99. Le TCS a aussi démontré une différence statistiquement significative dans les scores des deux groupes d’infirmières (p < 0,01) et une relation linéaire positive entre les scores moyens et l’expertise clinique (p < 0,01). Finalement, son appréciation générale a été jugée bonne. Cette étude a rendu disponible un TCS fidèle, valide et apprécié pour évaluer le raisonnement clinique infirmier en contexte de détérioration clinique en milieu hospitalier. Des études restent à faire pour déterminer si le TCS permet de déceler l’effet d’interventions éducatives.||Abstract: Hospitalised patients may present warning signs of clinical deterioration that are not always detected or well interpreted leading to preventable heart attack, intensive care unit transfer or even death. In order to recognize clinical signs of deterioration, nurses must have well developed clinical reasoning skills. Assessing nurse's clinical reasoning skills in situations of clinical deterioration could help to identify difficulties associated with the detection of its signs. At the present time no such tool for this purpose exists. Script concordance test (SCT) is a tool used to assess clinical reasoning that could be constructed for this purpose. This methodological study aims to develop a SCT to assess nurse's clinical reasoning in situations of clinical deterioration as well as to validate its psychometrics qualities, its validity, its reliability and the appreciation of the SCT. A SCT of 22 clinical situations (88 items) was developed. It was then completed by 47 nurses who were students undergoing their bachelor of nursing studies and by 21 expert nurses. Twelve students took the SCT twice to establish a test re-test. The SCT demonstrated good psychometrics qualities. After optimization, it had 20 clinical situations and 68 items. The SCT had a Cronbach's alpha coefficient of 0.76. The study of temporal stability demonstrated a moderate intra-class correlation coefficient of 0.554 (p < 0.05). Content validity generated indices of 0.99 both for relevance and clarity of the entire tool. TCS has also distinguished a statistically significant difference in the scores of the two groups of nurses (p < 0.01) and a positive linear relationship between mean scores and clinical expertise (p < 0.01). Finally, its overall appreciation is good. This study has made it possible to measure nurses' clinical reasoning skills in situations of in-hospital clinical deterioration using a reliable, valid and appreciated SCT. Other studies are needed to see if the SCT can detect the effect of educative interventions.

Le but de cette étude exploratoire est de déterminer si le test de concordance de script est un instrument capable de mesurer le raisonnement clinique d’étudiantes en formation et s’il peut déceler des différences entre le raisonnement clinique des novices et des expertes de la profession. Un TCS adapté au domaine des sciences infirmières et portant sur des champs particuliers de la pédiatrie a été administré à des candidates revendiquant différents niveaux d’expérience : des expertes du domaine (n=15), des infirmières (n=40) et des étudiantes de troisième année de formation (n=30). D’une durée de 20 minutes, le test a été pratiqué en ligne; il comptait 15 scénarios et 45 items au total. Les scores des étudiantes étaient significativement inférieurs aux scores des infirmières et des expertes. Le TCS est un instrument fiable et utile lorsqu’il s’agit de déterminer, en termes de raisonnement clinique, une différence de niveau entre la novice et l’experte.

Le but de cette étude exploratoire est de déterminer si le test de concordance de script est un instrument capable de mesurer le raisonnement clinique d’étudiantes en formation et s’il peut déceler des différences entre le raisonnement clinique des novices et des expertes de la profession. Un TCS adapté au domaine des sciences infirmières et portant sur des champs particuliers de la pédiatrie a été administré à des candidates revendiquant différents niveaux d’expérience : des expertes du domaine (n=15), des infirmières (n=40) et des étudiantes de troisième année de formation (n=30). D’une durée de 20 minutes, le test a été pratiqué en ligne; il comptait 15 scénarios et 45 items au total. Les scores des étudiantes étaient significativement inférieurs aux scores des infirmières et des expertes. Le TCS est un instrument fiable et utile lorsqu’il s’agit de déterminer, en termes de raisonnement clinique, une différence de niveau entre la novice et l’experte.

Le test de concordance de script (TCS) est un outil qui vise à mesurer le raisonnement clinique (RC) des apprenants en contexte d’incertitude en comparaison à celui des experts. La nature de cet instrument fait en sorte que le processus de détermination des scores est névralgique et influence ainsi l’interprétation de ces derniers. Le but de cette recherche à caractère exploratoire était d’examiner l’impact de trois méthodes de détermination des scores sur les propriétés métriques des scores obtenus avec un TCS. Nous avons réalisé une analyse secondaire de données recueillies entre 2010 et 2014 auprès de 160 étudiants inscrits dans un programme de médecine familiale à l'Université de Liège en Belgique. Ainsi la théorie classique des tests et le modèle de Rasch ont été mis à contribution. Selon les résultats obtenus, la méthode selon la bonne réponse n’est pas recommandée. En revanche, la méthode des scores combinés très utilisée dans le contexte du TCS n’a pas prouvé, selon nous, sa supériorité sur la méthode avec pénalité de distance. D’autres études s’avèrent nécessaires pour approfondir ces résultats.

L'enseignement, l'apprentissage et l'évaluation du raisonnement clinique en sciences infirmières est un défi pour les éducateurs de cette profession et leurs étudiants. Depuis plusieurs décennies, les chercheurs et les éducateurs dans le domaine des sciences de la santé ont travaillé pour élaborer des instruments d'évaluation dans le but de pouvoir mesurer le raisonnement clinique (Charlin, Bordage & Van der Vleuten, 2003). Plusieurs études semblent appuyer le test de concordance de script (TCS) en termes de validité, fiabilité, faisabilité et applicabilité pour plusieurs disciplines et différents contextes (Carrière & al, 2009). Deschênes et ses collaborateurs (2006; Deschênes, Charlin, Gagnon & Goudreau, 2011) ont mis au point et validé un TCS spécifiquement pour le raisonnement clinique en sciences infirmières (RCI). Comme l'évaluation a un impact important sur les stratégies d'apprentissage des étudiants (Sibert et al, 2001; Durak, Caliskan & Bor, 2007), les outils d'évaluation valides et fiables qui permettraient l'identification des problèmes spécifiques dans le développement du raisonnement clinique en sciences infirmières seraient très utiles pour guider les décisions concernant l'éducation (Gierl, 2007). Nous avons donc mené une étude pour explorer le potentiel diagnostique des questions d'un TCS. La question de recherche est la suivante: «Dans quelle mesure chaque question d’un TCS visant à évaluer le RCI peut-elle être reliée à des catégories et des stratégies de pensée spécifiques?" Avec une sous-question: «Comment peut-on décrire le potentiel diagnostique d’un TCS pour évaluer le RCI?". Nous avons fait une deuxième analyse de contenu des données qui ont été obtenues dans une étude précédente dans laquelle cinq vignettes (15 questions) du TCS de Deschênes (2006) ont été utilisées. Les résultats ont montré les catégories et stratégies de pensées utilisées pour répondre à certaines questions du TCS selon les groupes de participants. Aussi, nos résultats ont permis de découvrir des disparités importantes entre les groupes, notamment que le RCI des expertes est si différent des étudiantes, qu’il ne peut servir de référence. Enfin, cette étude démontre que le TCS a un potentiel diagnostique niveau par niveau (1ère, 2e, 3e année et expertes) et non d’un niveau à un autre. / Teaching, learning and assessing clinical nursing reasoning is a challenge for both nurse educators and their students. For several decades, researchers and educators in the field of health sciences, worked to develop assessment instruments that would effectively measure clinical reasoning (Charlin, Bordage & Van der Vleuten, 2003). Several studies seem to support the script concordance test (SCT) in terms of validity, reliability, feasibility and applicability in different disciplines and contexts (Carrière & al, 2009). Deschênes and her collaborators (2006; Deschênes, Charlin, Gagnon & Goudreau, 2011) developed and validated one SCT specifically for clinical nursing reasoning. Since evaluation has a great impact on students’ learning strategies (Sibert & al, 2001; Durak, Caliskan & Bor, 2007), valid and reliable assessment instruments that would allow the identification of specific problems in the development of clinical nursing reasoning would be very useful to guide educational decisions (Gierl, 2007). We therefore conducted a study to explore the diagnostic potential issues of SCT. The research question is: "To what extent each issue of SCT to assess clinical nursing reasoning can it be linked to categories and specific thinking strategies?" with a sub-question: "How can we describe the diagnostic potential of SCT to evaluate the clinical nursing reasoning?”. We did a second content analysis on think aloud data that were obtained in a previous study in which five vignettes (15 items) from Deschênes’ (2006) SCT were used. The results showed categories thoughts and strategies used to address issues of TCS by groups of participants. Thus, our results revealed significant differences between the groups, such that the clinical nursing reasoning is so different from expert students, it can’t serve as a reference. Finally, this study demonstrates that TCS has a diagnostic potential but level by level (1st, 2nd, 3rd year and experts).

La pratique de l’hématologie, comme celle de toute profession, implique l’acquisition d’un raisonnement adéquat. Se basant sur une théorie de psychologie cognitive, le test de concordance de script (TCS) a été développé et validé comme un instrument permettant d’évaluer le raisonnement clinique dans diverses spécialités médicales. Le but de cette étude était d’examiner l’utilité et les paramètres psychométriques d’un TCS en hématologie. Nous avons construit un TCS composé de 60 questions que nous avons administré à 15 résidents juniors (R1 à R3 en médecine interne), 46 résidents séniors (R4, R5 et R6 en hématologie) et 17 hématologues à travers le Canada. Après optimisation, le TCS comptait 51 questions. Sa consistance interne mesurée par le coefficient de Cronbach alpha était 0.83. Le test était en mesure de discriminer entre les résidents selon leur niveau de formation. Les questions contenant des images (n=10) semblaient avoir un potentiel discriminatoire plus élevé. Les scores obtenus par les résidents séniors corrélaient modéremment avec ceux obtenus à un test conventionnel d’hématologie composé de questions à choix multiples et à courte réponse (r de Pearson = 0.42; p=0.02). Le TCS a été complété en 36 minutes en moyenne et a été bien reçu par les participants. Le TCS est un instrument d’évaluation utile et valide en hématologie. Il peut être utilisé à des fins formatives en aidant au suivi de la progression des résidents. Il pourrait aussi être combiné à d’autres instruments d’évaluation à des fins sanctionnelles, ou encore, en éducation médicale continue. / The practice of hematology, like any other profession, requires the acquisition of adequate judgment. Based on cognitive psychology theory, the script concordance test (SCT) has been developed and validated as an instrument capable of evaluation clinical judgement in various medical specialties. The goal of this study was to examine the usefulness and the psychometric qualities of the SCT in hematology. We constructed a SCT composed of 60 questions and we administered it to 15 junior residents (R1 to R3 in internal medicine), 46 senior residents (R4, R5 and R6) and 17 hematologists from across Canada. After item optimization, the test comprised 51 questions. Its internal consistency measured by Cronbach alpha was 0.83. The test was able to discriminate between residents according to their year of training. Questions containing an image (n=10) seemed to offer a stronger discriminative potential. Scores obtained by the senior residents correlated moderately with those obtained on a conventional hematology exam made of multiple choice questions and short-answers (Pearson r: 0.42; p=0.02). The SCT was completed in an average of 36 minutes and was well received by participants. The SCT is a useful and valid evaluation instrument in hematology. It may be used during training to monitor resident progression. It may also be combined to other evaluation tools and used for summative purposes or in continuing medical education.

L'enseignement, l'apprentissage et l'évaluation du raisonnement clinique en sciences infirmières est un défi pour les éducateurs de cette profession et leurs étudiants. Depuis plusieurs décennies, les chercheurs et les éducateurs dans le domaine des sciences de la santé ont travaillé pour élaborer des instruments d'évaluation dans le but de pouvoir mesurer le raisonnement clinique (Charlin, Bordage & Van der Vleuten, 2003). Plusieurs études semblent appuyer le test de concordance de script (TCS) en termes de validité, fiabilité, faisabilité et applicabilité pour plusieurs disciplines et différents contextes (Carrière & al, 2009). Deschênes et ses collaborateurs (2006; Deschênes, Charlin, Gagnon & Goudreau, 2011) ont mis au point et validé un TCS spécifiquement pour le raisonnement clinique en sciences infirmières (RCI). Comme l'évaluation a un impact important sur les stratégies d'apprentissage des étudiants (Sibert et al, 2001; Durak, Caliskan & Bor, 2007), les outils d'évaluation valides et fiables qui permettraient l'identification des problèmes spécifiques dans le développement du raisonnement clinique en sciences infirmières seraient très utiles pour guider les décisions concernant l'éducation (Gierl, 2007). Nous avons donc mené une étude pour explorer le potentiel diagnostique des questions d'un TCS. La question de recherche est la suivante: «Dans quelle mesure chaque question d’un TCS visant à évaluer le RCI peut-elle être reliée à des catégories et des stratégies de pensée spécifiques?" Avec une sous-question: «Comment peut-on décrire le potentiel diagnostique d’un TCS pour évaluer le RCI?". Nous avons fait une deuxième analyse de contenu des données qui ont été obtenues dans une étude précédente dans laquelle cinq vignettes (15 questions) du TCS de Deschênes (2006) ont été utilisées. Les résultats ont montré les catégories et stratégies de pensées utilisées pour répondre à certaines questions du TCS selon les groupes de participants. Aussi, nos résultats ont permis de découvrir des disparités importantes entre les groupes, notamment que le RCI des expertes est si différent des étudiantes, qu’il ne peut servir de référence. Enfin, cette étude démontre que le TCS a un potentiel diagnostique niveau par niveau (1ère, 2e, 3e année et expertes) et non d’un niveau à un autre. / Teaching, learning and assessing clinical nursing reasoning is a challenge for both nurse educators and their students. For several decades, researchers and educators in the field of health sciences, worked to develop assessment instruments that would effectively measure clinical reasoning (Charlin, Bordage & Van der Vleuten, 2003). Several studies seem to support the script concordance test (SCT) in terms of validity, reliability, feasibility and applicability in different disciplines and contexts (Carrière & al, 2009). Deschênes and her collaborators (2006; Deschênes, Charlin, Gagnon & Goudreau, 2011) developed and validated one SCT specifically for clinical nursing reasoning. Since evaluation has a great impact on students’ learning strategies (Sibert & al, 2001; Durak, Caliskan & Bor, 2007), valid and reliable assessment instruments that would allow the identification of specific problems in the development of clinical nursing reasoning would be very useful to guide educational decisions (Gierl, 2007). We therefore conducted a study to explore the diagnostic potential issues of SCT. The research question is: "To what extent each issue of SCT to assess clinical nursing reasoning can it be linked to categories and specific thinking strategies?" with a sub-question: "How can we describe the diagnostic potential of SCT to evaluate the clinical nursing reasoning?”. We did a second content analysis on think aloud data that were obtained in a previous study in which five vignettes (15 items) from Deschênes’ (2006) SCT were used. The results showed categories thoughts and strategies used to address issues of TCS by groups of participants. Thus, our results revealed significant differences between the groups, such that the clinical nursing reasoning is so different from expert students, it can’t serve as a reference. Finally, this study demonstrates that TCS has a diagnostic potential but level by level (1st, 2nd, 3rd year and experts).