Return to search

Towards Navigational Aids using Augmented Reality for People with Alzheimer’s Disease in Outdoor Environments : A user study using HoloLens 2 around a University campus

This paper investigates the potential of augmented reality (AR) as a navigational aid for individuals with Alzheimer’s disease (AD), offering innovative solutions to the evolving challenges of AD care. As the disease progresses, patients often require more assistance and may transition to care centers, resulting in reduced independence. Prior to this, home-based care aims to stimulate cognitive functions and preserve autonomy. To enhance their freedom and mobility, it is proposed to leverage AR technology to create a first-person navigational aid addressing the unique needs of AD patients. The research confronts two primary challenges: firstly, exploring the design of AR navigational aids customized for individuals with Alzheimer’s disease adapted to outdoor use. Then, it aims to develop an outdoor localization system for the HoloLens 2 and evaluate its performance. Despite limitations induced by the approximate positioning, various types of aids compatible with the technical constraints faced have been envisioned. A set of features was implemented using the optical see-through AR headset HoloLens 2. These features included two distinct types of holograms (Arrow and Wind) and the ability to catch user attention prior to turns, allowing us to explore the effectiveness of these design choices. They were evaluated through a user study involving 15 healthy participants. Usability and task load were measured with Nasa-TLX and SUS questionnaires. An approximate positioning for outdoor use of the HoloLens 2 was elaborated using a smartphone as a GPS receiver, and a Kalman filter for filtering and fusion with IMU data. This enables to reach positioning accuracy at the meter level. This research demonstrates the promising utility of AR in assisting navigation in outdoor environments. Despite few significant results, the Arrow hologram appears to be a better fit for usability and users’ personal preferences. Further research is needed to get significant results on the impact of adaptive aids. The outdoor use of AR navigational aids is still limited by the poor visibility of holograms outdoors and low positioning accuracy. / Denna artikel utforskar potentialen hos förstärkt verklighet (AR) som navigationshjälpmedel för personer med Alzheimers sjukdom (AD) och erbjuder innovativa lösningar inom AD-vård. När sjukdomen fortskrider behöver patienterna mer hjälp och kan övergå till vårdcentraler, vilket minskar deras självständighet. Hemvård strävar efter att stimulera kognitiva funktioner och bevara autonomi. Vi föreslår utnyttja AR-teknologi för en skräddarsydd navigeringshjälp i första person för AD-patienters behov. Forskningen möter två utmaningar: att utforska AR-navigeringshjälpmedel för personer med Alzheimers sjukdom och anpassade för utomhusanvändning. Vi strävar efter att utveckla utomhuslokaliseringssystem för HoloLens 2 och utvärdera prestanda. Trots begränsningar på grund av ungefärlig positionering kan vi föreställa oss hjälpmedel som är kompatibla med tekniska begränsningar. Vi använde HoloLens 2 med funktioner som två hologramtyper och användaruppmärksamhetsfångst före svängar, utvärderat med 15 deltagare. Vi skapade ungefärlig positionering för HoloLens 2 utomhus med en smartphone som GPS-mottagare, med Kalman-filtrering och IMU-fusion för meter-noggrannhet. Forskningen visar AR:s lovande nytta i utomhusnavigering. Trots få signifikanta resultat verkar pilhologrammet passa användbarhet och preferenser bättre. Mer forskning behövs för att bedöma adaptiva hjälpmedels effekter. Användningen av AR-navigeringshjälpmedel utomhus begränsas av dålig synlighet och låg positionsnoggrannhet. / Cet article explore le potentiel de la réalité augmentée (RA) comme aide à la navigation pour les personnes atteintes de la maladie d’Alzheimer (MA), offrant une solution novatrice aux défis en constante évolution des soins liés à la MA. À mesure que la maladie progresse, les patients ont souvent besoin d’une assistance accrue et sont transférés dans des centres de soins, ce qui diminue leur indépendance. Avant cela, les soins à domicile visent à stimuler leurs fonctions cognitives et à préserver leur autonomie. Dans cette optique, nous proposons d’utiliser la RA pour créer une aide à la navigation à la première personne adaptée aux besoins spécifiques des patients atteints de la MA. La recherche aborde deux défis principaux : la conception d’aides à la navigation en RA pour les personnes atteintes de la MA, adaptées à une utilisation en extérieur, et le développement d’un système de localisation en extérieur pour HoloLens 2, suivi de son évaluation. Malgré les limitations liées au positionnement approximatif, nous avons envisagé différents types d’aides compatibles avec ces contraintes techniques. Nous avons mis en place un ensemble de fonctionnalités en utilisant le casque de RA HoloLens 2. Ces fonctionnalités incluent deux types d’hologrammes (Flèche et Vent) et la capacité à attirer l’attention de l’utilisateur avant les virages, nous permettant d’explorer l’efficacité de ces choix de conception. Ils ont été évalués lors d’une étude avec 15 participants en bonne santé. Nous avons élaboré une méthode de positionnement approximatif pour une utilisation en extérieur de l’HoloLens 2 en utilisant un smartphone comme récepteur GPS, avec un filtre de Kalman pour le filtrage et la fusion avec des données inertielles, permettant d’atteindre une précision de positionnement au mètre. Cette recherche démontre l’utilité prometteuse de la RA dans l’assistance à la navigation en extérieur, bien que des recherches supplémentaires soient nécessaires pour obtenir des résultats significatifs sur l’impact des aides adaptatives. L’utilisation des aides à la navigation en RA en extérieur est encore limitée par la visibilité réduite des hologrammes en extérieur et la faible précision du positionnement.

Identiferoai:union.ndltd.org:UPSALLA1/oai:DiVA.org:kth-342949
Date January 2023
CreatorsPrémont, Léa
PublisherKTH, Skolan för elektroteknik och datavetenskap (EECS)
Source SetsDiVA Archive at Upsalla University
LanguageEnglish
Detected LanguageFrench
TypeStudent thesis, info:eu-repo/semantics/bachelorThesis, text
Formatapplication/pdf
Rightsinfo:eu-repo/semantics/openAccess
RelationTRITA-EECS-EX ; 2023:818

Page generated in 0.003 seconds