Made available in DSpace on 2015-07-22T20:50:30Z (GMT). No. of bitstreams: 0 Previous issue date: 2008-07-30. Added 1 bitstream(s) on 2015-08-11T03:25:54Z : No. of bitstreams: 1 Publico-10999.pdf: 828663 bytes, checksum: 3120eb8cbe0dd912fe745f6d65d0f09e (MD5) / A avaliação da competência para o raciocínio clínico em situações de incerteza ainda é pouco pesquisada. Os testes escritos mais usados na educação médica são os testes de múltipla escolha. Embora estes sejam capazes de avaliar a capacidade para se lidar com problemas bem definidos, reconhece-se que, na prática, a maioria das situações contém incertezas. A tomada de decisões nesses contextos é um dos pilares da competência profissional. Compreender como isso se desenvolve pode contribuir com propostas de ensino com ênfase no aprimoramento dessa competência. Para tanto, a avaliação do raciocínio clínico em contextos de incerteza foi desenvolvida a partir da teoria de scripts, a qual explica o processo de raciocínio clínico, com base na metodologia descrita por Charlin et al. (2000). Os objetivos dessa pesquisa foram: desenvolver, aplicar e analisar um teste de concordância de scripts (TCS) com temas em geriatria. Um grupo de especialistas formou o painel de referência para a construção do escore do teste. O teste também foi aplicado em um grupo de estudantes de graduação. Da comparação dos resultados obtidos pelos dois grupos, chegou-se a indícios de validade do instrumento, que foi capaz de diferenciar o raciocínio clínico de acordo com o nível de experiência dos examinandos. As análises de consistência interna e de estudos G forneceram interpretações que se aproximaram da complexidade contida em um escore que busca avaliar a competência profissional. Os coeficientes de alfa de Cronbach e G foram calculados e discutidos segundo as qualidades e as limitações psicométricas dos resultados alcançados. Com isso, comprovou-se que o teste de concordância de script, com situações em geriatria, desenvolvido em língua portuguesa, em uma instituição de ensino brasileira, pode ser uma alternativa de avaliação do raciocínio clinico em contextos de incerteza. / Assessment of competency for clinical reasoning in contexts of uncertainty is still little studied. The assessment methodologies most applied in medical course are the multiple choice questions. Although these questions are appropriate to evaluate the capacity to solve well defined problems, it is recognized in practice most of situations are under uncertainty. Decision making in these situations becomes one of the supports of the professional competency. To understand how this process develops can contribute with educational propositions emphasizing the improvement of this competency. Therefore, a written test for the assessment of the clinical reasoning process in contexts of uncertainty could be helpful. For this purpose, it was developed an instrument of assessment based on the script cognitive theory that explains the clinical reasoning process, according to the description by Charlin et al. (2000). The purposes of this study were to develop, apply and analyze a script concordance test (SCT) in geriatrics. A group of experts constituted the reference panel for the construction of the test´s score. After that, the instrument was solved by a group of medical students. Comparing the results for both groups, it was achieved evidences of validation for the approach, which result was able to discriminate the clinical reasoning in agreement with the experience level of the examinees. Internal consistency and G test analyzes gave meanings close to the complexity of a score to measure a professional competency. Cronbach´s alphas and G coefficients were calculated and discussed to support psychometric qualities and limitations of results. Therewith, it has confirmed the script concordance test with geriatrics situations, developed in Portuguese, at a brazilian educational institution, can be an alternative to the assessment of clinical reasoning in contexts of uncertainty / TEDE / BV UNIFESP: Teses e dissertações

The need to address spiritual and religious issues is well established in the counseling literature and in accreditation standards, however, many graduates counseling students do not feel prepared to address these issues. In the United States, the vast majority of clients consider themselves to be spiritual or religious, so counselors who lack competence in addressing spiritual and religious issues in counseling are likely to offer ineffective or perhaps unethical care to clients. Counselor educators must improve education and assessment in this critical specialty area of counseling. Of primary concern is a student’s ability to demonstrate spiritual competence in counseling. The 2009 ASERVIC Spiritual Competencies offer the most comprehensive standard of spiritual competence in counseling in any mental health profession, however there is no reliable and standardized assessment that measures demonstrated spiritual competency. Competency can best be measured when the examinee makes choices in a context that is similar or the same as that in which he or she will practice, therefore an effective competency measurement must include client cases. The purpose of this study was to investigate whether a case based assessment for measuring clinical judgment in situations of uncertainty, called a Script Concordance Test, could be constructed by experts using the Delphi Method. This instrument was based on the 2009 ASERVIC Spiritual Competencies as the standard for demonstrated competence. iv The results of this study indicated that expert practitioners and educators could come to consensus on appropriate cases, appropriate competencies to measure in each case, items to assess competency in each case, and an instrument that included items assessing all 14 of the 2009 Spiritual Competencies. Additionally, the constructed instrument demonstrated excellent test retest reliability and adequate internal reliability. There are several implications for counselor education, First, this study provides evidence that expert practitioners and educators can come to consensus to construct a highly contextual instrument to measures clinical decision making about spiritual competence in counseling. Second, a promising new type of instrument with excellent reliability and strong content validity has been introduced to the field of counselor education. Third, with appropriate assessment, counselor education programs can begin to measure student competence, in terms of clinical judgment, on addressing spiritual and religions issues in counseling over time because this instrument is appropriate for use at different intervals throughout professional development. Fourth, the format of this instrument is also useful for educational purposes and reflective practice. Finally, the theoretical foundations of the Delphi Method and script concordance tests are compatible with one another and with instrument development. The researcher recommends that future studies to construct script concordance tests for other specialty areas of competence employ and refine this method.

L'enseignement, l'apprentissage et l'évaluation du raisonnement clinique en sciences infirmières est un défi pour les éducateurs de cette profession et leurs étudiants. Depuis plusieurs décennies, les chercheurs et les éducateurs dans le domaine des sciences de la santé ont travaillé pour élaborer des instruments d'évaluation dans le but de pouvoir mesurer le raisonnement clinique (Charlin, Bordage & Van der Vleuten, 2003). Plusieurs études semblent appuyer le test de concordance de script (TCS) en termes de validité, fiabilité, faisabilité et applicabilité pour plusieurs disciplines et différents contextes (Carrière & al, 2009). Deschênes et ses collaborateurs (2006; Deschênes, Charlin, Gagnon & Goudreau, 2011) ont mis au point et validé un TCS spécifiquement pour le raisonnement clinique en sciences infirmières (RCI). Comme l'évaluation a un impact important sur les stratégies d'apprentissage des étudiants (Sibert et al, 2001; Durak, Caliskan & Bor, 2007), les outils d'évaluation valides et fiables qui permettraient l'identification des problèmes spécifiques dans le développement du raisonnement clinique en sciences infirmières seraient très utiles pour guider les décisions concernant l'éducation (Gierl, 2007). Nous avons donc mené une étude pour explorer le potentiel diagnostique des questions d'un TCS. La question de recherche est la suivante: «Dans quelle mesure chaque question d’un TCS visant à évaluer le RCI peut-elle être reliée à des catégories et des stratégies de pensée spécifiques?" Avec une sous-question: «Comment peut-on décrire le potentiel diagnostique d’un TCS pour évaluer le RCI?". Nous avons fait une deuxième analyse de contenu des données qui ont été obtenues dans une étude précédente dans laquelle cinq vignettes (15 questions) du TCS de Deschênes (2006) ont été utilisées. Les résultats ont montré les catégories et stratégies de pensées utilisées pour répondre à certaines questions du TCS selon les groupes de participants. Aussi, nos résultats ont permis de découvrir des disparités importantes entre les groupes, notamment que le RCI des expertes est si différent des étudiantes, qu’il ne peut servir de référence. Enfin, cette étude démontre que le TCS a un potentiel diagnostique niveau par niveau (1ère, 2e, 3e année et expertes) et non d’un niveau à un autre. / Teaching, learning and assessing clinical nursing reasoning is a challenge for both nurse educators and their students. For several decades, researchers and educators in the field of health sciences, worked to develop assessment instruments that would effectively measure clinical reasoning (Charlin, Bordage & Van der Vleuten, 2003). Several studies seem to support the script concordance test (SCT) in terms of validity, reliability, feasibility and applicability in different disciplines and contexts (Carrière & al, 2009). Deschênes and her collaborators (2006; Deschênes, Charlin, Gagnon & Goudreau, 2011) developed and validated one SCT specifically for clinical nursing reasoning. Since evaluation has a great impact on students’ learning strategies (Sibert & al, 2001; Durak, Caliskan & Bor, 2007), valid and reliable assessment instruments that would allow the identification of specific problems in the development of clinical nursing reasoning would be very useful to guide educational decisions (Gierl, 2007). We therefore conducted a study to explore the diagnostic potential issues of SCT. The research question is: "To what extent each issue of SCT to assess clinical nursing reasoning can it be linked to categories and specific thinking strategies?" with a sub-question: "How can we describe the diagnostic potential of SCT to evaluate the clinical nursing reasoning?”. We did a second content analysis on think aloud data that were obtained in a previous study in which five vignettes (15 items) from Deschênes’ (2006) SCT were used. The results showed categories thoughts and strategies used to address issues of TCS by groups of participants. Thus, our results revealed significant differences between the groups, such that the clinical nursing reasoning is so different from expert students, it can’t serve as a reference. Finally, this study demonstrates that TCS has a diagnostic potential but level by level (1st, 2nd, 3rd year and experts).

La pratique de l’hématologie, comme celle de toute profession, implique l’acquisition d’un raisonnement adéquat. Se basant sur une théorie de psychologie cognitive, le test de concordance de script (TCS) a été développé et validé comme un instrument permettant d’évaluer le raisonnement clinique dans diverses spécialités médicales. Le but de cette étude était d’examiner l’utilité et les paramètres psychométriques d’un TCS en hématologie. Nous avons construit un TCS composé de 60 questions que nous avons administré à 15 résidents juniors (R1 à R3 en médecine interne), 46 résidents séniors (R4, R5 et R6 en hématologie) et 17 hématologues à travers le Canada. Après optimisation, le TCS comptait 51 questions. Sa consistance interne mesurée par le coefficient de Cronbach alpha était 0.83. Le test était en mesure de discriminer entre les résidents selon leur niveau de formation. Les questions contenant des images (n=10) semblaient avoir un potentiel discriminatoire plus élevé. Les scores obtenus par les résidents séniors corrélaient modéremment avec ceux obtenus à un test conventionnel d’hématologie composé de questions à choix multiples et à courte réponse (r de Pearson = 0.42; p=0.02). Le TCS a été complété en 36 minutes en moyenne et a été bien reçu par les participants. Le TCS est un instrument d’évaluation utile et valide en hématologie. Il peut être utilisé à des fins formatives en aidant au suivi de la progression des résidents. Il pourrait aussi être combiné à d’autres instruments d’évaluation à des fins sanctionnelles, ou encore, en éducation médicale continue. / The practice of hematology, like any other profession, requires the acquisition of adequate judgment. Based on cognitive psychology theory, the script concordance test (SCT) has been developed and validated as an instrument capable of evaluation clinical judgement in various medical specialties. The goal of this study was to examine the usefulness and the psychometric qualities of the SCT in hematology. We constructed a SCT composed of 60 questions and we administered it to 15 junior residents (R1 to R3 in internal medicine), 46 senior residents (R4, R5 and R6) and 17 hematologists from across Canada. After item optimization, the test comprised 51 questions. Its internal consistency measured by Cronbach alpha was 0.83. The test was able to discriminate between residents according to their year of training. Questions containing an image (n=10) seemed to offer a stronger discriminative potential. Scores obtained by the senior residents correlated moderately with those obtained on a conventional hematology exam made of multiple choice questions and short-answers (Pearson r: 0.42; p=0.02). The SCT was completed in an average of 36 minutes and was well received by participants. The SCT is a useful and valid evaluation instrument in hematology. It may be used during training to monitor resident progression. It may also be combined to other evaluation tools and used for summative purposes or in continuing medical education.

L'enseignement, l'apprentissage et l'évaluation du raisonnement clinique en sciences infirmières est un défi pour les éducateurs de cette profession et leurs étudiants. Depuis plusieurs décennies, les chercheurs et les éducateurs dans le domaine des sciences de la santé ont travaillé pour élaborer des instruments d'évaluation dans le but de pouvoir mesurer le raisonnement clinique (Charlin, Bordage & Van der Vleuten, 2003). Plusieurs études semblent appuyer le test de concordance de script (TCS) en termes de validité, fiabilité, faisabilité et applicabilité pour plusieurs disciplines et différents contextes (Carrière & al, 2009). Deschênes et ses collaborateurs (2006; Deschênes, Charlin, Gagnon & Goudreau, 2011) ont mis au point et validé un TCS spécifiquement pour le raisonnement clinique en sciences infirmières (RCI). Comme l'évaluation a un impact important sur les stratégies d'apprentissage des étudiants (Sibert et al, 2001; Durak, Caliskan & Bor, 2007), les outils d'évaluation valides et fiables qui permettraient l'identification des problèmes spécifiques dans le développement du raisonnement clinique en sciences infirmières seraient très utiles pour guider les décisions concernant l'éducation (Gierl, 2007). Nous avons donc mené une étude pour explorer le potentiel diagnostique des questions d'un TCS. La question de recherche est la suivante: «Dans quelle mesure chaque question d’un TCS visant à évaluer le RCI peut-elle être reliée à des catégories et des stratégies de pensée spécifiques?" Avec une sous-question: «Comment peut-on décrire le potentiel diagnostique d’un TCS pour évaluer le RCI?". Nous avons fait une deuxième analyse de contenu des données qui ont été obtenues dans une étude précédente dans laquelle cinq vignettes (15 questions) du TCS de Deschênes (2006) ont été utilisées. Les résultats ont montré les catégories et stratégies de pensées utilisées pour répondre à certaines questions du TCS selon les groupes de participants. Aussi, nos résultats ont permis de découvrir des disparités importantes entre les groupes, notamment que le RCI des expertes est si différent des étudiantes, qu’il ne peut servir de référence. Enfin, cette étude démontre que le TCS a un potentiel diagnostique niveau par niveau (1ère, 2e, 3e année et expertes) et non d’un niveau à un autre. / Teaching, learning and assessing clinical nursing reasoning is a challenge for both nurse educators and their students. For several decades, researchers and educators in the field of health sciences, worked to develop assessment instruments that would effectively measure clinical reasoning (Charlin, Bordage & Van der Vleuten, 2003). Several studies seem to support the script concordance test (SCT) in terms of validity, reliability, feasibility and applicability in different disciplines and contexts (Carrière & al, 2009). Deschênes and her collaborators (2006; Deschênes, Charlin, Gagnon & Goudreau, 2011) developed and validated one SCT specifically for clinical nursing reasoning. Since evaluation has a great impact on students’ learning strategies (Sibert & al, 2001; Durak, Caliskan & Bor, 2007), valid and reliable assessment instruments that would allow the identification of specific problems in the development of clinical nursing reasoning would be very useful to guide educational decisions (Gierl, 2007). We therefore conducted a study to explore the diagnostic potential issues of SCT. The research question is: "To what extent each issue of SCT to assess clinical nursing reasoning can it be linked to categories and specific thinking strategies?" with a sub-question: "How can we describe the diagnostic potential of SCT to evaluate the clinical nursing reasoning?”. We did a second content analysis on think aloud data that were obtained in a previous study in which five vignettes (15 items) from Deschênes’ (2006) SCT were used. The results showed categories thoughts and strategies used to address issues of TCS by groups of participants. Thus, our results revealed significant differences between the groups, such that the clinical nursing reasoning is so different from expert students, it can’t serve as a reference. Finally, this study demonstrates that TCS has a diagnostic potential but level by level (1st, 2nd, 3rd year and experts).

No description available.

Résumé : L’administration de la médication en centre d’hébergement (CH) constitue une activité qui amène l’infirmière à résoudre des problèmes complexes dans un contexte d’incertitude. Elle exige un raisonnement clinique rigoureux pour lequel il n’existe pas d’instrument de mesure valide et fidèle. Le but de cette étude était d’élaborer un test de concordance de script (TCS) pour mesurer le raisonnement clinique infirmier relatif à l’usage optimal des médicaments en CH et pour documenter sa validité et sa fidélité. Après l’optimisation, le TCS comprenait 55 items répartis dans 20 vignettes cliniques. Il a été mis à l’essai auprès d’étudiantes en sciences infirmières (n=76) et d’infirmières expertes (n=10). Le test a été rempli une seconde fois (test-retest) par 35 étudiantes. La moyenne des scores obtenue par les étudiantes novices est de 55,6 ± 7,7 tandis que celle obtenue par les infirmières expertes est de 63,7 ± 8,0. Les tests statistiques appliqués ont démontré une différence significative dans la moyenne des deux groupes (p < 0,02). La valeur du coefficient alpha de Cronbach de l’ensemble du TCS est de 0,65. Un coefficient de corrélation intraclasse (CCI) a été calculé pour évaluer la stabilité temporelle de l’instrument de mesure. Son résultat est de 0,618 (p = 0,000). Le TCS conçu dans le cadre de cette étude a besoin d’être modifié afin d’obtenir un meilleur indice de fidélité. Les autres résultats statistiques démontrent que le TCS est capable de distinguer les niveaux d’expertise. Cette étude vient s’ajouter aux autres études ayant évalué le raisonnement clinique et confirme l’importance de suivre les directives fondées sur les données probantes pour développer un TCS. / Abstract : The administration of prescribed medication in long-term care facilities is a task that requires the nurse to solve complex problems in a context of uncertainty. It demands a rigorous clinical reasoning for which there is no valid and reliable measurement tool. The purpose of this study was to develop a script concordance test (SCT) to measure nursing clinical reasoning regarding the optimal use of medication in long-term care facilities and to document its validity and reliability. After optimization, the SCT was made up of 55 items divided in 20 clinical vignettes. It has been tested on nursing students (n = 76) and expert nurses (n = 10). The test was completed a second time (test re-test) by 35 students. The mean score obtained by the novice students is 55.6 ± 7.7 while the one obtained by the expert nurses is 63.7 ± 8.0. The applied statistical tests showed a significant difference in the average of the two groups (p < 0.02). The Cronbach alpha coefficient for the entire SCT is 0.65. An inter-class correlation coefficient (ICC) was calculated to assess the temporal stability of the measuring tool. The result is 0.618 (p = 0.000). The SCT developed as part of this study needs to be modified in order for it to be more reliable. The other statistical results demonstrate that the SCT is able to differentiate between levels of expertise. This study adds to previous studies that evaluated clinical reasoning and confirms the importance of following guidelines that rely on evidence-based data to develop a SCT.

Mémoire numérisé par la Division de la gestion de documents et des archives de l'Université de Montréal.

Mémoire numérisé par la Division de la gestion de documents et des archives de l'Université de Montréal

Cette thèse doctorale porte sur l’apprentissage du raisonnement clinique infirmier (RCI) par une stratégie éducative numérique qui s’appuie sur la notion de la concordance de scripts. Elle repose sur un devis de recherche multiméthode visant le développement, la mise à l’essai et l’évaluation de la stratégie éducative auprès d’étudiants au premier cycle de formation universitaire en sciences infirmières à l’Université de Montréal. La thèse, qui comporte cinq chapitres, est rédigée selon le mode de présentation par articles. L’étude a été orientée par un cadre de référence incluant la théorie des scripts relevant des sciences cognitives de l’apprentissage et l’approche pédagogique de compagnonnage cognitif. Un devis de recherche multiméthode intégrant un devis de recherche-développement, une étude descriptive qualitative et une étude de cas multiples a été privilégié. Des experts collaborateurs (n = 5), des experts-panélistes (n = 12) et des étudiants (n = 45) ont participé à l’étude. Les résultats montrent que l’approche de recherche-développement a contribué à bonifier l’élaboration de la stratégie éducative numérique basée sur la concordance de scripts (SENBCS) et à assurer sa validation. Globalement, les étudiants ont apprécié la SENBCS, notamment la rétroaction variée et formative d’experts et l’opportunité d’apprendre la priorisation des hypothèses infirmières. L’intégration d’un devis descriptif a soutenu l’identification des stratégies d’apprentissage chez les étudiants lors de l’utilisation de la SENBCS. Les résultats montrent que les étudiants ont sollicité certaines stratégies d’apprentissage cognitives de traitement et d’exécution des données ainsi que des stratégies métacognitives d’autorégulation. Les résultats de l’étude de cas multiples montrent que les étudiants mettent en évidence certains processus cognitifs du RCI, à l’aide des vignettes du test de concordance de scripts (TCS) et de la pensée à voix haute, notamment : la représentation précoce d’une situation clinique, la transformation sémantique des données et la confrontation d’hypothèses. La SENBCS améliore la visibilité des savoirs d’experts, lesquels sont absents dans une classe traditionnelle ou même en stage clinique. Cela constitue une avancée certaine que de considérer l’apport des stratégies éducatives numériques dans les programmes de formation universitaire en sciences infirmières ou dans d’autres programmes pour soutenir le développement du raisonnement clinique. L’étude a permis de mettre à profit une riche documentation scientifique entourant l’élaboration de la SENBCS. Les résultats informent au regard de son utilisation efficiente afin qu’elle soit complémentaire à d’autres stratégies éducatives pour soutenir plus globalement la complexité de l’apprentissage du RCI. Des retombées pour les cinq domaines de la pratique infirmière sont générées par cette étude, elles offrent certaines pistes qui pourraient favoriser l’apprentissage du RCI. L’une d’elles vise à favoriser l’articulation des connaissances et de solliciter fréquemment des microjugements pour confronter et différencier des hypothèses relevant de l’incertitude de la pratique clinique, sous-entendant des apprentissages par couches successives. / This doctoral thesis focuses on learning clinical reasoning in nursing using a digital educational strategy based on the notion of script concordance. The thesis is based on a multi-method research design aimed at developing, testing and evaluating an educational strategy for undergraduate students in nursing at the University of Montreal. The thesis, which has five chapters, is written according to the mode of presentation by journal articles. This study was guided by a framework based on script theory, from cognitive science, and the pedagogical approach of cognitive companionship. A multi-method research design integrating a research-development approach, a descriptive qualitative study and a multiple case study was used. Collaborative experts (n=5), expert panellists (n=12) and students (n=45) participated in the study. The results show that the research-development approach enriched the development of a digital education strategy based on script concordance (DESBCS) while ensuring its validation. Overall, students appreciated the DESBCS, especially the varied and formative feedback received from experts while learning how to prioritize nursing hypotheses. A descriptive qualitative study design facilitated the identification of student learning strategies. Results demonstrate that when using a DESBCS, students used certain cognitive apprenticeship strategies for data processing and execution as well as for metacognitive self-monitoring. The results from the multiple case study show that students practised certain cognitive processes of clinical reasoning in nursing, using the vignettes from the script concordance test (SCT) and a think aloud approach, in particular: the early representation of a clinical situation, the semantic transformation of data and the confrontation of hypotheses. The DESBCS improves the visibility of expert knowledge usually absent in a traditional class or even in clinical training. It is a definite advancement to consider the contribution of digital educational strategies in university nursing education programs, or in other programs, to support the development of clinical reasoning. This study highlights the use of a wealth of scientific documentation surrounding the development of DESBCS. Study results inform instructors about effective DESBSC use to make it complementary to other educational strategies by supporting the complexities of learning clinical reasoning in nursing. Implications for the five domains of nursing practice emerge from this study and offer avenues to promote learning and development of clinical reasoning in nursing. One of these aims to promote knowledge articulation and the frequent solicitation of microjudgments to confront and differentiate hypotheses that arise from the uncertainty of clinical practice, implying learning in successive layers.