Québec Université Laval, Bibliothèque 2016

Cette étude vise à évaluer les qualités psychométriques d’une adaptation francophone de l’Échelle de réflexivité sur soi et de perspicacité (ERSP ; Grant, Franklin, & Langford, 2002) dans un contexte de développement professionnel en milieu organisationnel. Pour ce faire, une analyse de la structure factorielle, une analyse d’items comparative et des analyses de validité convergente et discriminante avec des échelles de personnalité et de flexibilité cognitive liées au construit ont été réalisées. Une comparaison entre les résultats des hommes et des femmes à l’échelle totale et aux deux sous-échelles est également réalisée. Les résultats montrent que l’outil adapté possède une structure factorielle similaire à celle de l’échelle originale en termes de nombre de facteurs et de correspondance entre les items et les facteurs. Les résultats quant à l’analyse d’items indiquent cependant une différence significative entre les alphas de la version originale et de la version adaptée. La validité discriminante est appuyée, mais les indices de validité convergente ne se sont pas avérés concluants, faute de relations significatives entre les résultats à l’ERSP adaptée et ceux des échelles de personnalité et de flexibilité cognitive reliées au construit. Tel qu’attendu, aucune différence significative entre les résultats des hommes et des femmes n’a été observée. Les résultats de l’étude sont discutés, notamment en ce qui a trait aux changements effectués à l’échelle originale et quant à la conceptualisation initiale du modèle de Grant et al. (2002). Enfin, les limites de l’étude sont exposées et des pistes de recherches futures sont proposées en lien avec la pertinence de l’utilisation de l’instrument dans un contexte organisationnel.

Cette étude doctorale porte sur les indices d’ajustement des scores individuels dérivés de la Théorie des réponses aux items (TRI). Les deux concepts retenus dans le cadre de cette recherche sont les taux de détection et les points critiques. Le premier et le troisième article traitent des taux de détection tandis que le deuxième article traite des points critiques. Le premier article étudie la relation entre la puissance des indices et l’ajustement des modèles logistiques à 2 et à 3 paramètres de la TRI aux données. Les résultats suggèrent que pour que les indices soient puissants, un modèle qui correspond à la distribution des données doit être préféré à un modèle qui épouse les données. Dans le deuxième article, nous avons élaboré des points critiques pour la statistiques lz qui peuvent être utilisés dans des contextes semblables à ceux étudiés dans le cadre du premier article. Les résultats obtenus, dans le deuxième article, démontrent qu’il est possible de créer une table des points critiques. Les intervalles de confiance calculés pour chaque point critique indiquent que ces derniers sont précis. Lors de la mise à l’essai de ces points critiques, il a été observé que les taux d’erreur de type I sont conservateurs. Ceci est plus prononcé pour l’erreur de type I de 0,01. Quant aux taux de détection pour les niveaux d’erreur de type I de 0,05 et 0,10, ils sont légèrement inférieurs à ceux recensés dans la documentation. Dans le troisième article, il est question de la relation entre les taux de détection des indices d’ajustement des scores individuels et le taux d’aberrance des patrons de réponses. Les résultats de ce troisième article suggèrent l’existence du phénomène du taux d’aberrance optimal. Il y a une augmentation du taux de détection des indices d’ajustement des scores individuels avec l’augmentation du taux d’aberrance jusqu’à l’atteinte d’un sommet. Par la suite, une augmentation du taux d’aberrance entraîne une diminution du taux de détection. Ces derniers résultats nous permettre d’expliquer un phénomène qui n’avait jamais été formellement étudié auparavant. / This doctoral research on Item Response Theory (IRT)-based Person-Fit Statistics (PFS) is comprised of three studies. This research was divided in such a way so we could study two key concepts: the detection rates and the critical values of PFS. In the first and third study, detection rates were studied. The second study focused on the critical values of a PFS. In the first article, we observed that the PFS were more accurate when they were used with parametric estimated ICCs (ML2P and ML3P), and this was independent of the sample size. It seems necessary to verify the model-data fit before carrying out appropriateness assessment with IRT-based PFS. Following the development of a table of critical values, in the second article, the degrees of confidence were calculated for each interval and these results lead us to believe that the critical values were precise. These critical values were tested and it was observed that the type I error rates were conservative but the detection rates observed for .05 and .10 type I error levels were slightly inferior to the detection rates found in the literature. In the third article, we investigated the optimal aberrance phenomenon, i.e., we observed an increase in the detection rate of PFS with an increase in the aberrance rate until a peak was reached and then an increase in the aberrance rate lead to a decrease in the detection rates of PFS. These last results help us to explain a phenomenon that was never previously studied.

Québec Université Laval, Bibliothèque 2015

La présence de réponses manquantes pour certains items d’une échelle de mesure est un phénomène que tout chercheur est susceptible de rencontrer au cours de ses travaux. Bien que les biais que peut causer un traitement inadéquat de cette non-réponse soient connus depuis près de 30 ans (Rubin, 1976), les connaissances quant à l’efficacité des diverses méthodes de traitement des valeurs manquantes sont encore très restreintes. La présente étude vise à faire évoluer les connaissances et les pratiques concernant le traitement des valeurs manquantes dans le contexte d’utilisation d’échelles de type Likert. Le problème fondamental que posent les valeurs manquantes est qu’il est impossible de ne pas en tenir compte lors de l’application d’une méthode d’analyse statistique. La majorité de ces méthodes ayant été développées pour traiter des matrices de données complètes. Les modèles de mesure utilisés dans le traitement des données issues d’échelles de type Likert n’échappent pas à cette réalité. Deux modèles de mesure sont étudiés plus en profondeur dans ce projet soit, le modèle classique et le modèle gradué de Samejima. La recherche entreprise avait comme objectif d’évaluer l’efficacité de cinq méthodes de traitement des valeurs manquantes, dont la méthode d’imputation multiple. De plus, il était visé d’évaluer l’impact du nombre de sujets, du nombre d’items et de la proportion des valeurs manquantes sur l’efficacité des méthodes. Les résultats issus de cette recherche semblent suggérer que la méthode d’imputation multiple présente une efficacité supérieure aux autres méthodes bien que, tout dépendant du modèle de mesure considéré, d’autres méthodes plus simples semblent aussi efficaces. Il importe de noter en conclusion qu’aucune méthode de traitement ne peut éliminer complètement les biais causés par les valeurs manquantes et qu’à ce sujet, il serait préférable de prévenir plutôt que de guérir. / The presence of missing answers for some items of a scale of measurement is a phenomenon which any researcher is suitable to meet during his work. Although bias that an inadequate treatment of this non-response can cause are known since nearly 30 years (Rubin, 1976), knowledge of the effectiveness of the various missing values treatment is still very restricted. The present study aims at making knowledge and practices concerning the treatment of the missing values evolve in the context of Likert type scale. The fundamental problem that missing values pose is that it is impossible not to take it into account at the time of the application of a method of statistical analysis, the majority of these methods having been developed to treat matrices of complete data. The models of measurement used in the analysis of Likert type scale data do not escape from this reality. Two models of measurement are studied more in-depth in this project, the classical test model and the Samejima graded model. The main objective of the research undertaken is to evaluate the effectiveness of five missing values treatment, including the multiple imputation method. Moreover, it was aimed to evaluate the impact of the number of subjects, the number of items and the proportion of the missing values on the effectiveness of the methods. The results of this research seem to suggest that the effectiveness of multiple imputation is higher than the other methods, although depending on the model of measurement considered, other simpler methods seem also effective. In conclusion, it is important to note that because no method of treatment can eliminate completely the bias caused by the presence of missing values, it would be preferable to prevent rather than to cure.

Le dessein de tout instrument actuariel vise à générer un score ou un indice numérique qui permet de prédire le risque qu'un événement se produise. Le domaine de la criminologie s'intéresse tout particulièrement à ce type d'instrument afin de prédire d'une part, le risque qu'une personne contrevenante récidive et, d'autre part, d'identifier les besoins correctionnels en lien avec ce score de risque. La criminologie a produit un nombre considérable d'outils de ce type. L'un des plus connus est le Level Service Case Management Inventory (LS/CMI) qui est, en fait, un inventaire de niveau de service et de gestion des cas appartenant à la dernière génération des outils actuariels d'évaluation du risque. Depuis l'adoption le 7 mai 2002 de la Loi sur le système correctionnel du Québec (LSCQ), loi qui fut mise en vigueur le 5 février 2007, l'implantation d'un tel outil pour évaluer les personnes contrevenantes sous la responsabilité des Services correctionnels représente une première au Québec. En dépit des nombreuses études de validité prédictive réalisées sur des outils tels que le LSI-R et le LS/CMI, la question qui se pose réside dans la pertinence de connaître les qualités métrologiques des items qui les composent. L'analyse des items du LS/CMI vise à combler un vide dans les écrits spécialisés en exploitant les avancées scientifiques des théories de la mesure au profit de la criminologie. Donc, le but poursuivi par cette étude métrologique vise essentiellement à analyser en profondeur la structure interne du LS/CMI en mettant à profit deux théories de la mesure : la théorie classique des tests (TCT) et la théorie des réponses aux items (TRI). Les analyses réalisées dans le cadre de cette recherche portent essentiellement sur les 43 items qui ont été formulés afin d'opérationnaliser les huit dimensions de risque qui constituent la structure interne du LS/CMI. Cette recherche consacrée au LS/CMI tente d'apporter des éléments nouveaux concernant le score de risque. Nous espérons que ces analyses permettront de mieux comprendre et de faire évoluer les méthodes de calcul de la cote de risque tout en mettant à profit les nouvelles théories de la mesure. Les résultats obtenus devraient fournir une nouvelle assise métrologique susceptible de contribuer à l'essor de cette catégorie d'instrument de mesure. La thèse apporte une masse d'information reliée à la structure interne de l'outil. L'ensemble des analyses pourraient avoir une incidence sur la validité prédictive si des mesures correctives sont apportées aux items identifiés comme peu contributifs au score de risque de récidive. L'analyse métrologique réalisée à partir de la théorie classique des tests et de la théorie des réponses aux items a révélé de nombreux items jugés problématiques par la faiblesse soit des indices de difficulté ou des indices de discrimination. Cela dit, nous ne pouvons pas assurer que ces ajustements amélioreraient pour autant la validité prédictive. Par ailleurs, il a été constaté que la position relative des items classés en fonction des indices de difficulté et des pentes démontre une forte corrélation entre les détenus et ceux purgeant une peine dans la communauté. Ce constat fait en sorte qu'un système de normes commun aux deux groupes pourrait être envisagé. Enfin, l'étude de biais montre qu'un nombre substantiel d'items présente des fonctionnements différentiels entre le groupe de détenus et celui des personnes purgeant une peine dans la communauté. II est proposé de revoir les points de césure afin de diminuer les écarts observés entre les items lorsque les deux groupes à l'étude sont comparés sur une échelle de mesure commune.

Mémoire numérisé par la Division de la gestion de documents et des archives de l'Université de Montréal.

Mémoire numérisé par la Division de la gestion de documents et des archives de l'Université de Montréal

Au cours des dernières années, le concept de résilience a reçu l'attention de nombreux chercheurs, particulièrement en raison de la pandémie (Kontogiannis, 2021; Vindegaard & Benros, 2020). Plusieurs études ont cherché à dresser le portrait de la situation dans divers pays et à comparer comment les nations font face à cette adversité. La résilience s'avère donc un sujet d'actualité et les préoccupations quant aux aspects méthodologiques associés aux comparaisons culturelles justifiées. Dans ce contexte, ce mémoire a pour objectif principal de contribuer à la validation transculturelle d'un instrument de mesure de la résilience largement reconnu; le Resilience Scale for Adults (RSA; Hjemdal et al., 2001) auprès d'un échantillon de 405 étudiants, québécois et francophone. À titre comparatif, les analyses statistiques réalisées s'inscrivent dans deux modèles de mesure : la théorie classique des tests et la théorie de la réponse à l'item. Les analyses de la structure factorielle de l'instrument montrent que le modèle à six facteurs obtenu au moyen d'équations structurelles exploratoires (ESEM) s'ajuste bien aux données recueillies auprès de l'échantillon québécois. Les coefficients alpha des dimensions varient de très bons (0,84) à excellents (0,95). Ces résultats sont comparables à ceux obtenus avec d'autres groupes culturels par plusieurs chercheurs. L'analyse d'items classique et celle appuyée sur le modèle gradué de Samejima (1969) montrent que les items du RSA sont, en majorité, performants et utiles pour évaluer la résilience chez les Québécois, principalement chez ceux présentant un niveau de résilience de très faible à modéré. Cinq items présentent des indices moins satisfaisants: trois de la dimension Compétence sociale et deux de la dimension Ressources sociales. Somme toute, le RSA présente des qualités métriques satisfaisantes et s'avère un instrument permettant l'évaluation de la résilience en contexte québécois. Des études impliquant des comparaisons directes entre les cultures demeurent nécessaires pour appuyer ces résultats.