Stuttgart, FH, Diplomarb., 2000.

Stuttgart, FH, Diplomarb., 2000.

For formative evaluations of user experience (UX) a variety of methods have been developed over the years. However, most techniques require the users to interact with the study as a secondary task. This active involvement in the evaluation is not inclusive of all users and potentially biases the experience currently being studied. Yet there is a lack of methods for situations in which the user has no spare cognitive resources. This condition occurs when 1) users' cognitive abilities are impaired (e.g., people with dementia) or 2) users are confronted with very demanding tasks (e.g., air traffic controllers). In this work we focus on emotions as a key component of UX and propose the new structured observation method Proxemo for formative UX evaluations. Proxemo allows qualified observers to document users' emotions by proxy in real time and then directly link them to triggers. Technically this is achieved by synchronising the timestamps of emotions documented by observers with a video recording of the interaction. In order to facilitate the documentation of observed emotions in highly diverse contexts we conceptualise and implement two separate versions of a documentation aid named Proxemo App. For formative UX evaluations of technology-supported reminiscence sessions with people with dementia, we create a smartwatch app to discreetly document emotions from the categories anger, general alertness, pleasure, wistfulness and pride. For formative UX evaluations of prototypical user interfaces with air traffic controllers we create a smartphone app to efficiently document emotions from the categories anger, boredom, surprise, stress and pride. Descriptive case studies in both application domains indicate the feasibility and utility of the method Proxemo and the appropriateness of the respectively adapted design of the Proxemo App. The third part of this work is a series of meta-evaluation studies to determine quality criteria of Proxemo. We evaluate Proxemo regarding its reliability, validity, thoroughness and effectiveness, and compare Proxemo's efficiency and the observers' experience to documentation with pen and paper. Proxemo is reliable, as well as more efficient, thorough and effective than handwritten notes and provides a better UX to observers. Proxemo compares well with existing methods where benchmarks are available. With Proxemo we contribute a validated structured observation method that has shown to meet requirements formative UX evaluations in the extreme contexts of users with cognitive impairments or high task demands. Proxemo is agnostic regarding researchers' theoretical approaches and unites reductionist and holistic perspectives within one method. Future work should explore the applicability of Proxemo for further domains and extend the list of audited quality criteria to include, for instance, downstream utility. With respect to basic research we strive to better understand the sources leading observers to empathic judgments and propose reminisce and older adults as model environment for investigating mixed emotions. / Für formative Evaluationen der User Experience (UX) wurden im Laufe der Jahre zahlreiche Methoden entwickelt. Die meisten Methoden erfordern jedoch, dass die Benutzer als Nebenaufgabe mit der Studie interagieren. Diese aktive Beteiligung an der Evaluation kann das untersuchte Erlebnis verfälschen und schließt Benutzer komplett aus, die keine kognitiven Ressourcen zur Verfügung haben. Dies ist der Fall, wenn 1) die kognitiven Fähigkeiten der Benutzer beeinträchtigt sind (z. B. Menschen mit Demenz) oder 2) Benutzer mit sehr anspruchsvollen Aufgaben konfrontiert sind (z. B. Fluglotsen). In dieser Arbeit konzentrieren wir uns auf Emotionen als eine Schlüsselkomponente von UX und schlagen die neue strukturierte Beobachtungsmethode Proxemo für formative UX-Evaluationen vor. Proxemo ermöglicht es qualifizierten Beobachtern, die Emotionen der Nutzer in Echtzeit zu dokumentieren und sie direkt mit Auslösern zu verknüpfen. Technisch wird dies erreicht, indem die Zeitstempel der von den Beobachtern dokumentierten Emotionen mit einer Videoaufzeichnung der Interaktion synchronisiert werden. Um die Dokumentation von beobachteten Emotionen in sehr unterschiedlichen Kontexten zu erleichtern, konzipieren und implementieren wir zwei verschiedene Versionen einer Dokumentationshilfe namens Proxemo App. Für formative UX-Evaluationen von technologiegestützten Erinnerungssitzungen mit Menschen mit Demenz erstellen wir eine Smartwatch-App zur unauffälligen Dokumentation von Emotionen aus den Kategorien Ärger, allgemeine Wachsamkeit, Freude, Wehmut und Stolz. Für formative UX-Evaluationen prototypischer Nutzerschnittstellen mit Fluglotsen erstellen wir eine Smartphone-App zur effizienten Dokumentation von Emotionen aus den Kategorien Ärger, Langeweile, Überraschung, Stress und Stolz. Deskriptive Fallstudien in beiden Anwendungsfeldern zeigen die Machbarkeit und den Nutzen der Methode Proxemo und die Angemessenheit des jeweiligen Designs der Proxemo App. Der dritte Teil dieser Arbeit besteht aus einer Reihe von Meta-Evaluationsstudien zu den Gütekriterien von Proxemo. Wir evaluieren Proxemo hinsichtlich der Reliabilität, Validität, Gründlichkeit und Effektivität, und vergleichen die Effizienz von Proxemo und die UX der Beobachter mit der Dokumentation mit Stift und Papier. Proxemo ist reliabel, sowie effizienter, gründlicher und effektiver als handschriftliche Notizen und bietet den Beobachtern eine bessere UX. Proxemo schneidet gut ab im Vergleich zu bestehenden Methoden, für die Benchmarks verfügbar sind. Mit Proxemo stellen wir eine validierte, strukturierte Beobachtungsmethode vor, die nachweislich den Anforderungen formativer UX Evaluationen in den extremen Kontexten von Benutzern mit kognitiven Beeinträchtigungen oder hohen Aufgabenanforderungen gerecht wird. Proxemo ist agnostisch bezüglich der theoretischen Ansätze von Forschenden und vereint reduktionistische und ganzheitliche Perspektiven in einer Methode. Zukünftige Arbeiten sollten die Anwendbarkeit von Proxemo für weitere Domänen erkunden und die Liste der geprüften Gütekriterien erweitern, zum Beispiel um das Kriterium Downstream Utility. In Bezug auf die Grundlagenforschung werden wir versuchen, die Quellen besser zu verstehen, auf denen die empathischen Urteile der Beobachter fußen und schlagen Erinnerungen und ältere Erwachsene als Modellumgebung für die künftige Erforschung gemischter Emotionen vor.

Die Universitätsbibliothek Freiberg führte im vergangenen Jahr erstmalig eine umfassende Umfrage durch, um Aussagen der Nutzer über die Zufriedenheit bzw. Unzufriedenheit mit der Qualität des Medienangebotes und der Serviceleistungen zu erhalten. Aus den Umfrageergebnissen sollen Impulse für die zukünftige Ausrichtung der Erwerbungspolitik, den Ausbau bestehender Services und die Implementierung neuer Dienstleistungen gewonnen werden.

Die Universitätsbibliothek Freiberg führte im vergangenen Jahr erstmalig eine umfassende Umfrage durch, um Aussagen der Nutzer über die Zufriedenheit bzw. Unzufriedenheit mit der Qualität des Medienangebotes und der Serviceleistungen zu erhalten. Aus den Umfrageergebnissen sollen Impulse für die zukünftige Ausrichtung der Erwerbungspolitik, den Ausbau bestehender Services und die Implementierung neuer Dienstleistungen gewonnen werden.

Als zeitgeschichtliche und kulturhistorische Quellen können Nachlässe für die Forschung nur relevant werden, wenn sie erschlossen und damit recherchierbar sind. Diese Grundvoraussetzung kann von vielen verwahrenden Institutionen nicht mehr in ausreichender Weise geschaffen werden, Bestandszugang und Erschließungsleistung stehen häufig in einem Missverhältnis. Auch die Situation der Nachlasssammlung des Deutschen Exilarchivs 1933 – 1945 der Deutschen Nationalbibliothek, auf die sich die vorliegende Untersuchung bezieht, stellt sich entsprechend dar. Für die Definition einer minimalen, aber dennoch nutzbringenden Erschließungsleistung ist die Bewertung von Erschließungsalternativen durch die Benutzer von großer Relevanz. Anhand von Auswertungen von Benutzeranfragen und Vor-Ort-Benutzungen sowie persönlichen Interviews und einer Onlinebefragung wurden die Bedürfnisse der Benutzer des Deutschen Exilarchivs 1933-1945 und deren Bewertung des Informationsangebots erfragt. Die vorliegende Untersuchung hat Ansätze zur Vereinfachung und damit zur Beschleunigung der Nachlasserschließung ergeben. Vereinfachte, auch stark vereinfachte Konvolutbeschreibungen wurden von den Probanden sehr positiv bewertet. Detailangaben als Bestandteil der aktuell praktizierten Formalerschließung wurden dagegen nicht als unbedingt notwendige Erschließungsinformation bestätigt; zudem waren Teile der Erschließungsdaten aus Benutzersicht nicht ausreichend verständlich. Für die Präsentation von Erschließungsdaten und Digitalisaten ist im Bereich der Nachlasserschließung die Forderung nach einer „kulturgutaffinen“ Umsetzung zu unterstützen. Der geeigneten Präsentation von Nachlassgliederungen und der Möglichkeit der Navigation in Bestandsstrukturen kommt dabei besondere Bedeutung zu. Groberschließung bedeutet die Entscheidung für eine bewusste Qualitätsminderung bei der Nachlasserschließung. Zumindest temporär müssen der Zeitfaktor und die Verständlichkeit und Auffindbarkeit von Erschließungsinformationen vor der Forderung nach einer möglichst genauen Beschreibung rangieren. / Literary estates can only be used as contemporary sources for historical and cultural research when they are indexed and searchable. In many archives and libraries this basic prerequisite can no longer be provided sufficiently, since additions to the collections and indexing activity often grow disproportionately. The situation of the collection of literary estates of the Deutsches Exilarchiv 1933-1945 of the Deutsche Nationalbibliothek, subject of this survey, reflects this divergence. The evaluation of alternative indexation by users themselves is very important for the definition of a reduced but nevertheless useful indexation. An analysis of users’ inquiries, on-site usage, personal interviews and an online questionnaire of Deutsche Exilarchiv 1933-1945 users and their appraisal of the offered information was the basis of ascertaining user needs. The presented study resulted in approaches towards simplification that will result in speeding-up indexation of the bequests. Simplified and even starkly simplified descriptions of convolutes were evaluated very positively by the interviewed users. On the contrary, detailed entries which are part of the current descriptive indexing were not confirmed as absolutely necessary information. Apart from this, from the users’ perspective part of the indexation data were not sufficiently comprehensible. The presentation of indexing data and digitized orginals should be oriented on the specification presets by the material. Of special importance in the presentation of literary estates are appropriate outlines and tools for navigating the structures. Rough indexing implies the conscious decision for quality reduction when indexing literary estates. At least for the time being the time factor for indexation, comprehensibility and retrieval, will have preference at the cost of descriptive indexation as exact as possible.

So könnte man eine Befragung der Nutzerinnen und Nutzer der SLUB Dresden vom Januar bis Februar diesen Jahres ganz kurz zusammenfassen. Gelegenheitsbesucher wurden nicht einbezogen. Die Bibliothek wird vor allem zum Lernen und Arbeiten und für Literaturrecherchen besucht....

So könnte man eine Befragung der Nutzerinnen und Nutzer der SLUB Dresden vom Januar bis Februar diesen Jahres ganz kurz zusammenfassen. Gelegenheitsbesucher wurden nicht einbezogen. Die Bibliothek wird vor allem zum Lernen und Arbeiten und für Literaturrecherchen besucht....

Die Benutzerforschung zu digitalen Bibliotheken sieht sich aktuell zwei Herausforderungen gegenüber: dem Bestreben, Studien vermehrt über das Internet durchzuführen, und dem Wunsch, Benutzerverhalten in natürlichen Umgebungen statt in Laborsituationen zu erforschen. Asynchrone Remote-(Usability-)Tests sind eine methodische Herangehensweise, die möglicherweise die Lösung beider Bedürfnisse sind. Sie erlauben Personen die Teilnahme an einer Studie zu einem Zeitpunkt und an einem Ort ihrer Wahl; der Ort der Wahl entspricht dabei i.d.R der natürlichen Nutzungsumgebung der Teilnehmer. Da die Validität einer Studie von der Qualität der Daten abhängt, ist es für die Forschung sehr wichtig, die möglichen Einflüsse von Ablenkungen in der natürlichen Umgebung auf das Nutzerverhalten in der Testsituation zu bedenken. Das Dissertationsprojekt untersuchte, inwieweit asynchrone Remote-Studien aufgrund von störenden Ablenkungsfaktoren systematischen Fehler bei der Evaluierung digitaler Bibliotheken produzieren. In einem Experiment wurde das Vorhandensein von Ablenkung während der Testdurchführung in natürlichen Umgebungen ermittelt sowie der Einfluss dieser Ablenkung auf das Nutzungsverhalten analysiert. Experimentell wurde die Zeit gemessen, die Teilnehmer in einem Labor und Teilnehmer in ihrer natürlichen Umgebung zur Fertigstellung des Tests benötigten. Die Ergebnisse des Experiments zeigen, dass die Teilnehmer während der Studie stark abgelenkt waren und dass sie in ihrer natürlichen Umgebung deutlich mehr Zeit für denselben Test benötigten. Der Ort der Testdurchführung beeinträchtigte jedoch statistisch gesehen weder die Erledigung der Aufgaben noch die abgegebenen Bewertungen der Teilnehmer noch ihren Entscheidungsprozess. Aus den Ergebnissen folgt, dass der Ort der Testdurchführung nicht relevant ist, aber dass es von großer Bedeutung für die Validität der Daten ist, im Test zu erheben, was während der Durchführung in der natürlichen Umgebung des Teilnehmers geschieht. / User studies in digital libraries face two fundamental challenges. The first is the necessity of running more user studies in an online environment. Users can access digital library collections and services worldwide and the services should be usable at any time. This need for more online studies is coupled with a second need, a demand to test under realistic conditions outside of laboratories in users’ natural environment. Asynchronous remote usability tests are a methodological approach that might answer both needs: they allow participants to take part in a study at a time and place of their choice, often in the participants’ natural environment. Any chosen place, however, might be noisy. Distractions are ubiquitous in a user’s natural environment. An awareness of the potential influences of distractions on users’ behavior during test situations is of great importance, because the validity of a study depends on the quality of the data. If an instrument allows systematic mistakes in measurements because of distractions, the validity is at risk. This dissertation examined if distraction in the users’ natural environment produces a systematic mistake in digital library studies that take place at a time and location of participants’ choice. In order to investigate the existence of distractions during online user studies in digital libraries and to analyze the influence(s) of that distraction, a psychological experiment was set up. It ex¬amined completion time scores between participants in a laboratory and participants in their natural environment. The results of the experiment showed that participants were highly distracted and that participants in their natural environment needed more time to complete the same test. The setting did not affect successful task completions, the participants’ judgments of sites or their decision-making processes. This work can conclude that it does not matter where we test, but it matters what happens during the test.