Return to search

Adding insight in educational lecture environments with ARS : A post-presentation analysis using an interactive visualization tool

Feedback plays an important role in evaluating and developing courses in higher education. Due to inefficient factors, the feedback cycle does not meet its full potential and can therefore be counterproductive. Current evaluation methods typically demand much effort from both students and teachers, when asking for feedback at the end of the course and analyzing the results. Lack of engagement can thus be observed in both parties. Moreover, we can see an increasing trend of ARS used in educational settings, to improve learning quality and enhance the relationship between the presenter and audience. This study’s aim was to make the feedback process more efficient and to explore how to provide insight in lecture quality for continuous course development. To fully understand the target user, a pre-study was conducted to identify design requirements and to investigate which areas to evaluate during the courses and why. The interview sessions resulted in four main dimensions to evaluate; Meaningfulness, comprehension, knowledge and attitude. Based on these dimensions, a feedback tool was developed to gather the feedback data from students in two different cohorts. The tool was developed in a survey format, with the help of an existing ARS. The feedback was then collected after two university lectures during two courses. To explore the potential of providing useful insight to the lecturer, and to facilitate the analytical step of the process, an interactive visualization tool was prototyped to display the data. The visualization tool was evaluated, both in terms of usability and its overall concept, with a total of eight lecturers, two of which were lecturers in the courses used to gather the feedback data. Even though the results show that it might be difficult to draw a single conclusion of the tools’ usability, the users found the concept interesting and were positive towards the idea. The perception of the tool’s intended use varied and is discussed along with future development. / Feedback spelar en viktig roll när det kommer till utvärdering och utveckling av kurser inom högre utbildning. På grund av ineffektiva faktorer uppnår feedbackcykeln inte sin fulla potential och kan därför vara kontraproduktiv. Aktuella utvärderingsmetoder kräver typiskt mycket ansträngning från både elever och lärare och brist på engagemang kan således observeras hos båda parter. Dessutom kan vi se en ökande trend av ARS som används i utbildningsinstitutioner, för att förbättra utbildningskvaliteten samt förhållandet mellan presentatören och publiken. Syftet med studien var att göra feedbackprocessen mer effektiv och undersöka hur man kan ge insikt i föreläsningskvaliteten för kontinuerlig kursutveckling. För att förstå slutanvändaren genomfördes en förundersökning för att identifiera deras begär och för att undersöka vilka områden som ska utvärderas under kurserna och varför. Intervjuerna resulterade i fyra huvuddimensioner att utvärdera och ge insikt inom; Betydelse, förståelse, kunskap och attityd. Baserat på dessa dimensioner utvecklades ett feedbackverktyg. Verktyget var i form av ett formulär och producerades med hjälp av ett befintlig ARS. Feedbackdatan samlades sedan in efter två universitetsföreläsningar under två kurser. För att undersöka möjligheten att ge föreläsaren användbar insikt och för att underlätta det analytiska steget i processen, utvecklades ett interaktivt visualiseringsverktyg. Visualiseringsverktyget utvärderades, både vad gäller användbarhet och dess övergripande koncept, med totalt åtta föreläsare. Även om resultaten visar att det kan vara svårt att dra en enda slutsats av verktygets användbarhet, fann användarna konceptet intressant och var överlag positiva. Uppfattningen av verktygets avsedda användning varierar och diskuteras tillsammans med framtida utveckling.

Identiferoai:union.ndltd.org:UPSALLA1/oai:DiVA.org:kth-254991
Date January 2019
CreatorsRunhem, Alexandra
PublisherKTH, Skolan för elektroteknik och datavetenskap (EECS)
Source SetsDiVA Archive at Upsalla University
LanguageEnglish
Detected LanguageEnglish
TypeStudent thesis, info:eu-repo/semantics/bachelorThesis, text
Formatapplication/pdf
Rightsinfo:eu-repo/semantics/openAccess
RelationTRITA-EECS-EX ; 2019:443

Page generated in 0.0053 seconds