This is a multi-article dissertation that seeks to address the current state of online teaching evaluation processes in post-secondary institutions. The last two decades have seen a dramatic increase in enrollment in online courses at post-secondary institutions. Unfortunately, evaluating online instructors has been a neglected field of research leaving many post-secondary institutions to develop their own evaluation systems. A deeper analysis of the current practices of online instructor evaluation will help administrators to strengthen their evaluation processes, thereby providing more effective online teaching. The first article is a literature review that explores common practices of post-secondary institutions. By performing an extensive review of the literature, it is clear that very little research has been done to address online instructor evaluation beyond student evaluations. The second article compares different approaches to online instructor evaluation in various post-secondary institutions. By performing interviews with administrators, we found that many institutions are using a variety of types of evaluations and not just student evaluations to evaluate online teaching. The third article is a study that explores how well institutions that utilize a master course model evaluate online teaching competencies. This is done by performing a content analysis of their observational rubrics.

Cette recherche part du constat de l’utilisation des nouvelles technologies qui se généralise dans l’enseignement universitaire (tant sur campus qu’en enseignement à distance), et traite cette question sous trois aspects institutionnel, pédagogique et technologique. La recherche a été menée à travers quinze universités canadiennes où nous avons interrogé vingt-quatre universitaires, nommément des responsables de centres de pédagogie universitaire et des experts sur la question de l’intégration des technologies à l’enseignement universitaire. Pour le volet institutionnel, nous avons eu recours à un cadre théorique qui met en relief le changement de structure et de fonctionnement des universités à l’ère d’Internet, suivant le modèle théorique de l’Open System Communications Net de Kershaw et Safford (1998, 2001). Les résultats, à l’aune de ce modèle, confirment que les universités conventionnelles sont dans une phase de transformation due à l’utilisation des technologies de l'information et de la communication (TIC). De plus, les cours hybrides, la bimodalité, des universités entièrement à distance visant une clientèle estudiantine au-delà des frontières régionales et nationales, des universités associant plusieurs modèles, des universités fonctionnant à base d’intelligence artificielle, sont les modèles principaux qui ont la forte possibilité de s’imposer dans le paysage universitaire nord-américain au cours des prochaines décennies. Enfin, à la lumière du modèle théorique, nous avons exploré le rôle de l’université, ainsi en transformation, au sein de la société tout comme les rapports éventuels entre les institutions universitaires. S’agissant de l’aspect pédagogique, nous avons utilisé une perspective théorique fondée sur le modèle du Community of Inquiry (CoI) de Garrison, Anderson et Archer (2000), revu par Vaughan et Garrison (2005) et Garrison et Arbaugh (2007) qui prône notamment une nouvelle culture de travail à l’université fondée sur trois niveaux de présence. Les résultats indiquent l’importance d’éléments relatifs à la présence d’enseignement, à la présence cognitive et à la présence sociale, comme le suggère le modèle. Cependant, la récurrence -dans les trois niveaux de présence- de certains indicateurs, suggérés par les répondants, tels que l’échange d’information, la discussion et la collaboration, nous ont amenés à conclure à la non-étanchéité du modèle du CoI. De plus, certaines catégories, de par leur fréquence d’apparition dans les propos des interviewés, mériteraient d’avoir une considération plus grande dans les exigences pédagogiques que requiert le nouveau contexte prévalant dans les universités conventionnelles. C’est le cas par exemple de la catégorie « cohésion de groupe ». Enfin, dans le troisième volet de la recherche relatif à la dimension technologique, nous nous sommes inspirés du modèle théorique d’Olapiriyakul et Scher (2006) qui postule que l’infrastructure dans l’enseignement doit être à la fois une technologie pédagogique et une technologie d’apprentissage pour les étudiants (instructional technology and student learning technology). Partant de cette approche, le volet technologique de notre recherche a consisté à identifier les fonctionnalités exigées de la technologie pour induire une évolution institutionnelle et pédagogique. Les résultats à cet égard ont indiqué que les raisons pour lesquelles les universités choisissent d’intégrer les TIC à l’enseignement ne sont pas toujours d’ordre pédagogique, ce qui explique que la technologie elle-même ne revête pas forcément les qualités a priori requises pour une évolution pédagogique et institutionnelle. De ce constat, les technologies appropriées pour une réelle évolution pédagogique et institutionnelle des universités ont été identifiées. / This research is regarding the increasing use of Information and Communication Technology (ICT) in Higher Education, within conventional universities as well as open and distance education, and focuses on its institutional, educational and technological implications for campus-based and distance programs. The research was undertaken throughout fifteen Canadian universities in which twenty-four directors and experts, working in teaching and learning centres, were interviewed. For the institutional aspect, the research relied on the Kershaw & Safford's Open System Communications Net (1998, 2001) theoretical framework that considers the universities' structural and function change in the digital era. The research results confirm that conventional universities are in a period of transformation due to the use of digital technologies; and, that blended learning courses, bimodality, virtual universities, universities using diverse models and universities operating with artificial intelligence, will be the models with high-growth probability during the next decades in North America. Regarding the educational aspect, the research used a theoretical perspective pertaining to Garrison, Anderson & Archer Community of Inquiry Framework (2000) reviewed by Vaughan & Garrison (2005) and Garrison & Arbaugh (2007) that advocates a cultural change in University work, based on three levels of presence. The research results indicate the importance of elements related to teaching presence, cognitive presence and social presence, as the model suggests. However, the recurrence- at the three levels of presence- of some indicators the interviewees mentioned led to conclude that the CoI model has some interchangeable indicators within its categories. Furthermore, some categories frequently mentioned by the respondents should require a greater consideration. That is the case of the “Group Cohesion” category. Finally, with respect to the technology employed, the theoretical framework used Olapiriyakul & Scher's Content Design and Development Model (2006) that postulates that the technological infrastructure for university teaching must be both instructional technology and student learning technology. The research results reveal that educational reasons are not necessarily the ones for which universities make the decision to apply ICT to teaching; and, because of that, the technology used may not have been chosen for its learning benefits. This observation led to the interviewees describing opportunities for the development of the next generation of learning technologies applicable to conventional universities.

Cette recherche part du constat de l’utilisation des nouvelles technologies qui se généralise dans l’enseignement universitaire (tant sur campus qu’en enseignement à distance), et traite cette question sous trois aspects institutionnel, pédagogique et technologique. La recherche a été menée à travers quinze universités canadiennes où nous avons interrogé vingt-quatre universitaires, nommément des responsables de centres de pédagogie universitaire et des experts sur la question de l’intégration des technologies à l’enseignement universitaire. Pour le volet institutionnel, nous avons eu recours à un cadre théorique qui met en relief le changement de structure et de fonctionnement des universités à l’ère d’Internet, suivant le modèle théorique de l’Open System Communications Net de Kershaw et Safford (1998, 2001). Les résultats, à l’aune de ce modèle, confirment que les universités conventionnelles sont dans une phase de transformation due à l’utilisation des technologies de l'information et de la communication (TIC). De plus, les cours hybrides, la bimodalité, des universités entièrement à distance visant une clientèle estudiantine au-delà des frontières régionales et nationales, des universités associant plusieurs modèles, des universités fonctionnant à base d’intelligence artificielle, sont les modèles principaux qui ont la forte possibilité de s’imposer dans le paysage universitaire nord-américain au cours des prochaines décennies. Enfin, à la lumière du modèle théorique, nous avons exploré le rôle de l’université, ainsi en transformation, au sein de la société tout comme les rapports éventuels entre les institutions universitaires. S’agissant de l’aspect pédagogique, nous avons utilisé une perspective théorique fondée sur le modèle du Community of Inquiry (CoI) de Garrison, Anderson et Archer (2000), revu par Vaughan et Garrison (2005) et Garrison et Arbaugh (2007) qui prône notamment une nouvelle culture de travail à l’université fondée sur trois niveaux de présence. Les résultats indiquent l’importance d’éléments relatifs à la présence d’enseignement, à la présence cognitive et à la présence sociale, comme le suggère le modèle. Cependant, la récurrence -dans les trois niveaux de présence- de certains indicateurs, suggérés par les répondants, tels que l’échange d’information, la discussion et la collaboration, nous ont amenés à conclure à la non-étanchéité du modèle du CoI. De plus, certaines catégories, de par leur fréquence d’apparition dans les propos des interviewés, mériteraient d’avoir une considération plus grande dans les exigences pédagogiques que requiert le nouveau contexte prévalant dans les universités conventionnelles. C’est le cas par exemple de la catégorie « cohésion de groupe ». Enfin, dans le troisième volet de la recherche relatif à la dimension technologique, nous nous sommes inspirés du modèle théorique d’Olapiriyakul et Scher (2006) qui postule que l’infrastructure dans l’enseignement doit être à la fois une technologie pédagogique et une technologie d’apprentissage pour les étudiants (instructional technology and student learning technology). Partant de cette approche, le volet technologique de notre recherche a consisté à identifier les fonctionnalités exigées de la technologie pour induire une évolution institutionnelle et pédagogique. Les résultats à cet égard ont indiqué que les raisons pour lesquelles les universités choisissent d’intégrer les TIC à l’enseignement ne sont pas toujours d’ordre pédagogique, ce qui explique que la technologie elle-même ne revête pas forcément les qualités a priori requises pour une évolution pédagogique et institutionnelle. De ce constat, les technologies appropriées pour une réelle évolution pédagogique et institutionnelle des universités ont été identifiées. / This research is regarding the increasing use of Information and Communication Technology (ICT) in Higher Education, within conventional universities as well as open and distance education, and focuses on its institutional, educational and technological implications for campus-based and distance programs. The research was undertaken throughout fifteen Canadian universities in which twenty-four directors and experts, working in teaching and learning centres, were interviewed. For the institutional aspect, the research relied on the Kershaw & Safford's Open System Communications Net (1998, 2001) theoretical framework that considers the universities' structural and function change in the digital era. The research results confirm that conventional universities are in a period of transformation due to the use of digital technologies; and, that blended learning courses, bimodality, virtual universities, universities using diverse models and universities operating with artificial intelligence, will be the models with high-growth probability during the next decades in North America. Regarding the educational aspect, the research used a theoretical perspective pertaining to Garrison, Anderson & Archer Community of Inquiry Framework (2000) reviewed by Vaughan & Garrison (2005) and Garrison & Arbaugh (2007) that advocates a cultural change in University work, based on three levels of presence. The research results indicate the importance of elements related to teaching presence, cognitive presence and social presence, as the model suggests. However, the recurrence- at the three levels of presence- of some indicators the interviewees mentioned led to conclude that the CoI model has some interchangeable indicators within its categories. Furthermore, some categories frequently mentioned by the respondents should require a greater consideration. That is the case of the “Group Cohesion” category. Finally, with respect to the technology employed, the theoretical framework used Olapiriyakul & Scher's Content Design and Development Model (2006) that postulates that the technological infrastructure for university teaching must be both instructional technology and student learning technology. The research results reveal that educational reasons are not necessarily the ones for which universities make the decision to apply ICT to teaching; and, because of that, the technology used may not have been chosen for its learning benefits. This observation led to the interviewees describing opportunities for the development of the next generation of learning technologies applicable to conventional universities.