Spelling suggestions: "subject:"interraterreliability"" "subject:"interratereliability""
21 |
Reliabilita testu "Škála svalové dráždivosti" pro hodnocení spasticity pacientů s míšní lézí / Reliability of "Muscle excitability scale" for spasticity assessment in patients with spinal cord injuryKadrmanová, Ivana January 2016 (has links)
The aim of this paper was to define interrater reliability of "Muscle excitability scale" in assessment of lower extremities muscle spasticity in patiens with spinal cord injury. Raters were two students of 2nd grade of master study of physiotherapy. Testing was performed at Centrum Paraple o.p.s. and 48 patients took part in the research. Except the Muscle excitability scale, Modified Ashworth scale, Penn spasm frequency scale and Clonus scale were also assessed. Percentage rate of agreement and also value of kappa coefficient that state value of agreement between raters were assigned for each scale. Percent agreement for Muscle excitability scale was 54,2 % for right and 64,6 % for left lower extremity. Kappa coefficient and therefore interrater reliability of this test was assessed on 0,38 on the right side and 0,51 on the left. The results and thein comparison with other used scales are discussed in this thesis.
|
22 |
Validität und Reliabilität eines Instruments zur Messung der Qualität der Kommunikation und seine Eignung im studentischen Unterricht / Validation of the Calgary Cambridge Guides to Assess Communication Skills of undergraduate German medical studentsNolte, Catharina 15 July 2014 (has links)
Fragestellung und Zielsetzung: Ausgehend von dem Ziel, kommunikative Fähigkeiten von Studierenden der Humanmedizin objektiv zu messen, sollte in dieser Studie untersucht werden, ob eine ins Deutsche übersetzte Kurzversion des „Calgary-Cambridge Observation Guide for the Medical Interview“ (CCOG) von Kurtz und Silverman (1996) valide und reliabel ist und sich damit die Kommunikationsfähigkeit von Studierenden der Medizin bewerten lässt.
Methode: Eine Auswahl von Ärzten, wissenschaftlichen Mitarbeitern und Studierenden des klinischen Studienabschnittes evaluierten im Abstand von mindestens drei Monaten fünf Anamnese-Videos mittels der ins Deutsche übersetzten „CCOG-Kurzversion“. Die Videos bestanden aus je einem Gespräch zwischen einem Studierenden des ersten klinischen Semesters in der Rolle des Arztes bzw. einer approbierten Ärztin und einem Schauspielpatienten – in unterschiedlicher Kommunikationsqualität. Die Auswertung erfolgte deskriptiv nach folgenden Kriterien: Bewertungszeitpunkt, Geschlecht bzw. Gruppe der Rater, Qualität der Videogespräche. Darüberhinaus wurden eine explorative und eine konfirmatorische Faktorenanalyse berechnet und die Retest-Reliabilität (Intra-Rater-Reliabilität) sowie die Intra-Class-Correlation (Inter-Rater-Reliabilität) bestimmt.
Ergebnisse: 30 Rater beteiligten sich an der Studie, davon drei als sog. „Goldstan-dard“. Die Gesamtbewertung aller fünf Anamnese-Videos zeigte eine geringfügige Verbesserung in der Notenvergabe beim zweiten Bewertungszeitpunkt. In der Benotung waren professionelle Rater generell etwas strenger als Laien, Ärzte etwas strenger als Studierende und weibliche Rater etwas strenger als männliche. „Gold-standard“ und übrige Rater unterschieden sich bei einzelnen Items bis zu 1,6 Notenpunkten (z.B. beim Item „verbale/nonverbale Unterstützung des Patienten“). In der Originalversion enthält der CCOG 28 Items, die in sechs Skalen (mit jeweils 3 bis 7 Items) zusammengefasst sind. Diese Struktur ließ sich in der hier gerechneten Faktorenanalyse nur bedingt abbilden. Gemäß Eigenvalue > 1 genügten 5 Faktoren zur Abbildung bzw. Aufteilung der Items. Darüber hinaus zeigte sich eine andere Skalenzuordnung als im Original und über die Hälfte der Items (15/28) lud auf demselben Faktor. Auch die Inter-Rater-Übereinstimmung in der Beantwortung einzelner Items war nicht optimal (ICC-Range: 0,05 bis 0,57).
Schlussfolgerungen: Die CCOG-Kurzversion zeigte relativ gute Übereinstimmun-gen bei der Retest-Reliabilität. Schwierigkeiten zeigten sich bei der Benotung einiger Items im Vergleich zwischen dem „Goldstandard“ und den übrigen Ratern. Die Skalen-Struktur der Items und die Inter-Rater-Reliabilität sind nur bedingt akzeptabel. Vielleicht hätte eine dreistufige Bewertungsskala oder eine homogene Rater-Gruppe oder auch eine bessere Schulung das Ergebnis der ICC verbessert. Es sollten einige Items gestrichen, sprachlich trennschärfer formuliert oder anders zusammengefasst, neue Items hinzugefügt und Skalen neu strukturiert werden.
|
23 |
Classification angiographique d’anévrismes cérébraux traités par voie chirurgicale ou endovasculaire : revue systématique et étude d’accord inter & intra-observateurBenomar, Anass 08 1900 (has links)
INTRODUCTION
Les anévrismes cérébraux représentent une condition potentiellement mortelle. Ils sont traités par voie chirurgicale (« clipping ») ou endovasculaire (dont le « coiling »), et plusieurs essais cliniques randomisés comparant ces traitements utilisent les résultats angiographiques comme mesure du succès du traitement. Le développement d'une classification standardisée et applicable aux deux traitements et aux trois modalités angiographiques (conventionnelle, angioscan et angio-IRM) est nécessaire. Nos objectifs furent de revoir systématiquement les classifications existantes, d’évaluer la fiabilité inter/intra-observateur d’une nouvelle classification angiographique commune, et d’en vérifier la pertinence clinique.
MÉTHODES
Deux revues systématiques furent effectuées dans 5 bases de données pour recenser les classifications (et leur fiabilité, lorsque rapportée) pour chaque traitement.
Les résultats d’angiographie conventionnelle post-clipping (n=30) ou coiling (n=30) de 60 patients furent évalués de manière indépendante, à l’aide d’une nouvelle classification à 3 catégories, par 19 cliniciens ayant diverses pratiques et expériences. Les observateurs devaient également indiquer la prise en charge clinique appropriée pour chaque cas: un suivi espacé, étroit, ou un retraitement. Quinze lecteurs ont procédé à une 2e évaluation des cas (présentée selon un ordre permuté) à 1 mois d’écart. Le même travail fut reconduit, dans un deuxième temps, par 24 observateurs avec 60 cas évalués par angioscan (n=30) ou angio-IRM (n=30).
Les accords inter/intra-observateurs furent estimés avec la statistique Alpha de Krippendorff (aK); la corrélation entre le choix de classe et la prise en charge fut calculée avec un test V de Cramer.
RÉSULTATS
Soixante-dix classifications (44 post-clipping, 26 post-coiling) furent recensées dans la littérature. La fiabilité variait de 0.12 à 1.00, avec une hétérogénéité significative en termes d’observateurs et de patients.
L’accord inter-observateur pour la classification retenue était substantiel pour les résultats d’angiographie conventionnelle (aK=0.76; 0.67–0.83) et des autres modalités (aK=0.63; 0.55–0.70); peu importe le traitement, la spécialité ou l’expérience des évaluateurs. La classe est fortement corrélée à la prise en charge (V de Cramer de 0,77 à 0,80 selon la modalité angiographique; p<0,001).
CONCLUSION
La classification proposée est fiable et pertinente cliniquement. Elle servira d’outil valide pour évaluer les résultats angiographiques d’anévrismes dans les futurs essais cliniques comparant les deux traitements, peu importe la modalité d’imagerie utilisée. / INTRODUCTION
Intracranial aneurysms are a medical condition associated with serious morbidity and mortality when ruptured. They are mainly treated with surgical clipping or endovascular coiling, and randomized clinical trials comparing both treatments often use angiographic results as a surrogate outcome of treatment success. The development of a standardized, reliable method to report angiographic results, applicable to both treatments using any angiographic modality (Conventional [CA], Computed tomography [CTA], or magnetic resonance [MRA] angiography) is needed. We sought to systematically review existing methods of classifying treated aneurysms and to assess the inter-/intra-rater reliability of a new angiographic grading scale, as well as its clinical relevance.
METHODS
We conducted two separate systematic reviews in 5 databases to collect post-clipping and post-coiling grading scales, along with their reliability when reported.
The CA of 60 cases of clipped (n=30) and coiled (n=30) aneurysms were independently evaluated by 19 raters of various backgrounds and experiences using a new 3-grade scale. Raters were also asked how they would manage each case (delayed, close follow-up, or retreatment). Fifteen raters performed a 2nd evaluation of the same cases (in a permuted order) at least one month apart. The same methodology was used to study the reliability of the scale when 60 noninvasive angiography cases of clipped (30 CTA) or coiled (30 MRA) aneurysms were evaluated by 24 raters.
Inter and intra-rater agreements were assessed using Krippendorff’s Alpha statistics (aK), and the relationship between occlusion grade and clinical management using Cramer’s V test.
RESULTS
The systematic reviews found 70 grading scales (44 post-clipping, 26 post-coiling) with significant heterogeneity in terms of reliability (kappa values from 0.12 to 1.00), raters, and patients.
Overall inter-rater agreement for the grading scale was substantial for CA results (aK=0.76; 0.67–0.83) as well as for noninvasive results (aK=0.63; 0.55–0.70); regardless of background, experience, or treatment used. A strong relationship was found between angiographic grades and management decisions (V=0.80±0.12 for CA; V=0.77±0.14 for CTA/MRA [p<0.001]).
CONCLUSION
A standardized 3-grade scale was found to be a reliable and clinically meaningful tool to compare the results of clipping and coiling of aneurysms using any angiographic modality. It could be used as a valid tool to adjudicate results of comparative randomized trials, and to standardize the reporting of aneurysm treatments.
|
24 |
Fidélité interexaminateurs de l’Évaluation à domicile de l’interaction personne environnement (ÉDIPE) : version cognitiveLouis-Delsoin, Cindy 04 1900 (has links)
INTRODUCTION. D’ici 2030, le Québec comptera 180 000 personnes aînées vivant avec un trouble neurocognitif (PATNC). Les TNC entraînent des enjeux d’interaction personne environnement – l’aîné interagissant avec son environnement humain (proche aidant) ou non humain (domicile) – compromettant ainsi le maintien à domicile. Basée sur le Modèle de compétence, l’Évaluation à domicile de l’interaction personne environnement (ÉDIPE) – version cognitive vise à combler le manque d’instruments validés ciblant ces enjeux. Cet instrument comprend trois sections (Exploration des problèmes cognitifs et de leur impact; Évaluation de l’interaction; Validation et interprétation du processus d’évaluation) évaluées lors d’entrevues, d’observations et de mises en situation; deux échelles (ordinale; dichotomique) qualifient l’interaction personne-environnement. Ce Mémoire porte sur l’étude de la fidélité interexaminateurs de l’ÉDIPE–version cognitive. MÉTHODOLOGIE. Basés sur la Théorie classique de la mesure, deux ergothérapeutes indépendants et formés ont administré simultanément l’ÉDIPE–version cognitive à 30 dyades (PATNC-proches aidant), à domicile (3,2h/évaluation). Pour chaque item, le coefficient kappa, le pourcentage d’accord et l’erreur-type ont été calculés. RÉSULTATS. Les coefficients kappa varient entre -0,053 et 1,000 (pourcentages d’accord 50%-100%); la majorité (80%) varie d’Acceptable à Presque parfait. DISCUSSION. La formation et l’application rigoureuse du guide de passation soutiennent la fidélité interexaminateurs de l’instrument. Plusieurs coefficients faibles démontrent un pourcentage d’accord élevé, référant aux paradoxes de Feinstein et Cicchetti. CONCLUSION. Cette étude documente la fidélité interexaminateurs d’un instrument prometteur comblant une lacune dans la compréhension de l’interaction personne environnement des PATNC vivant à domicile. Poursuivre la validation de l’ÉDIPE–version cognitive appuiera davantage son utilisation en clinique et en recherche. / INTRODUCTION. By 2030, Quebec will have 180,000 older people living with a neurocognitive disorder (OPLwNDs). Neurocognitive disorders lead to issues affecting the person-environment interaction – the older adult interacting with his or her human (caregiver) or non-human (home) environment – thereby compromising aging in place. Based on the Model of Competence, the Home Assessment of Person-Environment Interaction (HoPE)-Cognitive Version aims to fill the gap in validated tools targeting these issues. This tool has three sections (Exploration of cognitive problems and their impact; Assessment of interaction; Validation and interpretation of the assessment process) that employ interviews, observations and task performance; two scales (ordinal; dichotomous) qualify the person-environment interaction. This Master’s thesis examines the interrater reliability of the HoPE-Cognitive Version. METHODOLOGY. Based on classical test theory, two independent, trained occupational therapists simultaneously administered the HoPE-Cognitive Version to 30 dyads (OPLwND-caregiver), at home (3.2 h/assessment). For each item, the kappa coefficient, percentage of agreement and standard error were calculated. RESULTS. Kappa coefficients ranged from -0.053 to 1.000 (percentages of agreement 50%–100%); the majority (80%) ranged from Acceptable to Almost Perfect. DISCUSSION. Training and rigorous application of the assessment guide support the tool’s interrater reliability. Several low coefficients demonstrate a high percentage of agreement, referring to Feinstein and Cicchetti’s paradoxes. CONCLUSION. This study documents the interrater reliability of a promising tool that fills a gap in understanding the person-environment interaction of OPLwNDs living at home. Further validation of the HoPE-Cognitive Version will support its use in clinical and research settings.
|
25 |
Reliability of the COntext Assessment for Community Health (COACH) tool when administered on mobile phones versus pen-paper: A comparative study among healthcare staff in Nairobi, Kenya.Cederqvist, Melissa January 2015 (has links)
Aim: To investigate the reliability of the COntext Assessment for Community Health (COACH) tool on mobile phone versus pen-paper in Nairobi, Kenya. Background: One of the barriers to the progress of the MDGs has been the failure of health systems in many LMICs to effectively implement evidence-based interventions As a result of the “know-do” gap, patients do not benefit from advances in healthcare and are exposed to unnecessary risks. Better mapping of context improves implementation by allowing tailoring of strategies and interpretation of knowledge translation. COACH investigates healthcare contexts for LMICs and has only been used on pen-paper. With 5 billion mobile phone users globally, mobile technologies is being recognized as able to play a formal role in health services. Methods: Comparative study with 140 nurses/midwives and doctors in four hospitals in Nairobi. 70 were randomly assigned to mobile phone and pen-paper each. The tool was administered twice with a two week interval and test-retest reliability, internal consistency and interrater reliability were assessed. Findings: Excellent test-retest reliability for both pen-paper and mobile phone (ICC >0.81). 45% (pen-paper) and 34% (mobile phone) moderate agreement between individual questions in round 1 and 2. Acceptable average Cronbach’s alpha (>0.70). Conclusion: Both mobile phone and pen-paper were reliable and feasible for data collection. The findings are a good first step towards using COACH in Kenya. Additional research is needed for individual settings. Using mobile phones could increase healthcare facilities’ accessibility in implementation research, helping to close the “know-do” gap and reach the SDGs.
|
26 |
Reliabilitets- och validitetstestning av ADL-instrument RAINBOW - ett teamdokument / Reliability- and validity test of ADL-instrument RAINBOW - a teamdocumentAhl, Gullan January 1998 (has links)
Ett nytt instrument utvecklades från Katz´ ADL-index, vilket visat sig vara ett allt för grovt instrument, för att kartlägga patientens aktivitetsförmåga och självständighetsutveckling. Bedömningsinstrumentet innehåller patientdata samt kategori-index och kom att kallas RAINBOW på grund av att instrumentet är i fyrfärgstryck. En kontroll av det nykonstruerade team-instrumentet utfördes i syfte att mäta dess tillförlitlighet. Mellanbedömar reliabilitet mellan oberoende bedömare har prövats. Validiteten har analyserats på 4 patienter ur materialet och jämförts med Katz´ ADl-index. Studien, som bestod av parvisa oberoende bedömningar, utfördes av sjuksköterskor, sjukgymnaster och arbetsterapeuter. 40 patienter deltog i studien. Delaktivitetsbedömningarna uppgick till 950 och innehöll 36 avvikelser. Resultaten visade på 96 % samstämmighet i bedömningarna. Den kvalitativa analysen visade, i jämförelse med Katz´ ADL-index, att RAINBOW kategori-index gav utförligare information om patientens självständighetsnivå samt hjälpbehov. I denna studie bedömdes endast strokepatienter, men då begreppen som ingår i instrumentet kan anses allmängiltiga, torde det även kunna användas på andra diagnosgrupper. En gemensam rehabiliteringsterminologi gav teamarbetet en ökad kvalitet gällande bedömning, planering samt utvärdering av den enskilde patientens aktivitetsförmåga. / <p>Uppsatsarbete omfattande 10 poäng, C-nivå, inom ramen för arbetsterapeutprogrammet 120 p., Högskolan i Örebro, Institutionen för vårdvetenskap och omsorg. Författarens namn i uppsatsen är Gull-Britt Johansson.</p>
|
Page generated in 0.072 seconds