Förstärkt verklighet (hädanefter förkortat AR efter engelskans augmented reality) är när virtuellt blandas med verkligt, och används till exempel för mobilspel och inom det militära. Utvecklingen av AR-applikationer har under de senaste åren förenklats, vilket gett upphov till nya möjligheter för tillämpning av AR-tekniken. Syftet med vårt arbete är att undersöka om instruktioner givna via AR bidrar till att användare gör färre fel när de utför industriellt underhåll. Vi har valt att jämföra AR-instruktioner med pappersmanualer, då det senare är det som oftast används inom industrin idag. Det finns ett intresse inom industrin för att integrera AR-lösningar i deras verksamhet, inte minst för att det potentiellt kan minska tiden det tar att åtgärda driftstopp, men även för att kunna hjälpa oerfarna och nya operatörer. Idag finns det ett flertal hjälpmedel och programmeringsbibliotek som har gjort utveckling av AR-applikationer enklare, vilket öppnar upp för fler möjligheter när det gäller AR:s tillämpningsområden. För att undersöka om AR-instruktioner kan bidra till att användare gör färre fel har vi utvecklat en AR-applikation till mobiltelefon. I ett experiment jämför vi applikationen mot en pappersmanual på en egen-konstruerad industriell underhållsuppgift. Vi har visat att med hjälp av vår AR-applikation gjorde an-vändare i snitt drygt 60% färre fel. Vi genomförde även ett test för användarvänlighet där applikationen fick ett resultat som var ett poäng under det som anses vara helt tillfredställande. / Augmented reality (AR) is when the virtual is mixed with the real, AR is used in for example mobile games and the military. The development of AR-applications has been simplified during recent years, which has opened possibilities for new applications of the AR-technology. The purpose of our work is to research whether instructions given via AR leads to the users making fewer errors when performing industrial maintenance. We chose to compare AR-instructions to paper manuals since this is the most commonly used instruction medium today. Companies have shown interest in the development of AR-solutions for industrial maintenance in their day-to-day operations. Particularly since it can potentially lead to decreased downtime and help new or inexperienced operators. Today there exists several aids and programming libraries that has simplified the development of AR-applications, which opens for more possibilities when it comes to the areas of application for AR. To examine if AR-instructions leads to fewer errors made by the users, we have developed an AR-application for mobile phones. In our experiment we compare the AR-application with a paper manual on a custom-built maintenance task. Our results show that the users with the AR-application perform just over 60% fewer errors. To verify the usability of the application we conducted a usability test, the results from this test puts our application one point below the acceptable limit.

Förstärkt verklighet ger användare möjlighet att ta del av mer information via digital väg än vad deras sinnen ensamma kan erbjuda. I detta arbete undersöks om förstärkt verklighet applicerad på liknande sätt som handledning i spel kan effektivisera en monteringsprocess. I detta syfte har en huvudmonterad och videobaserad utrustning för förstärkt verklighet utvecklats och jämförts mot pappersinstruktioner i användartester för att undersöka om effektiviseringar kan göras. De två aspekter av effektivitet som har undersökts är tidsåtgång och mängd fel. Ur ett tidsperspektiv har effektiviseringar inte kunnat påvisas men sett till mängden fel har en effektivisering kunnat påvisas. Då testpopulationen enbart bestod av tolv personer finns det ett behov av att i framtiden göra större undersökningar för att säkerställa resultaten. / Young Operator 2020

In the last three years, several advanced toolkits for developing mobile augmented reality applications have been released. This in combination with the increased computational power of commercially available mobile devices has led to a great surge of attention given to the development of such applications. Currently, most mobile augmented reality applications being developed are within the gaming category. In this study, one of the less popular use cases, indoor navigation, were explored. An initial literature study was carried out followed by the development of a prototype which were then evaluated through different usability tests. During the tests, the test subjects navigated partly with the use of the prototype and partly with traditional navigational aids present in the shopping mall where the testing took place. The test subjects navigated 28% faster on average when using the prototype and felt that it was more intuitive. Different negative aspects were, however, also observed such as a decreased awareness of their surroundings. In the end, mobile augmented reality was deemed to have great potential when used in the context of indoor navigation even though some technical challenges would likely need to be solved before widespread adoption could take place. / Under de senaste tre åren har flera avancerade verktyg för utveckling av mobilapplikationer med förstärkt verklighet lanserats. Detta i kombination med den ökade prestandan av kommersiellt tillgängliga mobila enheter har lett till en stor ökning av utvecklandet av sådana applikationer. För närvarande är majoriteten av de mobila applikationer med förstärkt verklighet som utvecklas inom kategorin spel. I denna studie undersöktes ett av de mindre populära användningsområdena, inomhusnavigering. Initialt utfördes en litteraturstudie följt av utvecklingen av en prototyp som sedan utvärderades genom olika användartester. Under testerna navigerade deltagarna dels med prototypen dels med de traditionella navigationshjälpmedel som fanns i köpcentret där testerna ägde rum. Deltagarna navigerade i genomsnitt 28% snabbare vid användning av prototypen och kände överlag att den var mer intuitiv att använda. Olika negativa aspekter med prototypen observerades såsom en minskad medvetenhet av omgivningen. I slutändan bedömdes mobilapplikationer med förstärkt verklighet ha stor potential vid användning för inomhusnavigering men att olika tekniska utmaningar sannolikt skulle behöva lösas före en mer utbredd användning av teknologin.

Interaktiv projicerad förstärkt verklighet är ett delområde inom projicerad förstärktverklighet, där interaktiviteten handlar om att projicera virtuelldata på en entitet somär rörlig. Denna projektion kan åstadkommas genom att använda en kalibrerad projektor-djupkamerasystem som detekterar entitet med hjälp av datorseende. Dettainteraktiva system har varierande antal tillämpningsområden, dock framkommer enkritisk problemformulering, vilket är noggrannheten för dessa system. Noggrannheten i detta fall är hur korrekt projektionen sker på den specifika entiteten, noggrannheten är därför en viktig aspekt för att validera ifall vissa tillämpningar är möjliga implementera. Lösningen för detta problem är att implementera interaktiv projicerad förstärkt verklighet och utföra prototyptester med det implementerade systemet och sedan vidare analysera noggrannheten med testdata. Prototypen kalibrerasmed befintliga verktyg från tidigare studier, detekterar med hjälp av positionsuppskattning och kan sedan projicera punkter på specifika kroppsdelar som även följerpersonen vid rörelse. Resultatet som framkom blev en prototyp som testades för noggrannheten. Testernasker med hjälp av datorseende för att extrahera mätdata såsom projicerade punktenoch förväntade punkten. Från analysen av testdata framkom det att projektionensnoggrannhet är lämplig för tillämpningar som inte kräver exceptionell noggrannhet,såsom nöje, konst, spel och med mera. Ytterligare forskning krävs för användningsområden som kräver exceptionell noggrannhet som tillämpningar inom sjukvård ochkirurgi. / Interactive projected augmented reality is a subfield within projected augmented reality, where the interactivity is about projecting virtual data onto an entity that canpotentially be in movement. This projection can be accomplished by using a calibrated projector-depth camera system that detects entities using computer vision.This interactive system has a varying number of application areas; however, a criticalproblem emerges, which is the accuracy of these systems. The accuracy in this caseis how correctly the projection takes place on the specific entity, the accuracy istherefore an important aspect to validate if certain applications are possible to implement correctly. The solution for this problem is by implementing interactive projectedaugmented reality and perform prototype tests with the implemented system andthen further analyzing the accuracy with test data. The prototype is calibrated withexisting tools from previous studies, detects using pose detection, which can thenproject points on specific body parts that also follows the person during movement.The result that got developed was a prototype that was tested for accuracy. The testsare done using computer vision to extract measurement data such as the projectedpoint and the expected point. The result from the analysis of the test data showedthat the accuracy of the projection is suitable for applications that do not requireexceptional accuracy, such as entertainment, art, games and so on. Further research is required for applications that require exceptional accuracy such ashealthcare and surgical applications.

Prestandan i dagens mobiltelefoner har ökat på senare tid. Därmed har det blivit aktuellt med förstärkt verklighet i mobilapplikationer. Det här arbetet har undersökt hur förstärkt verklighet används i mobilapplikationer för att framhäva en plats. Genom att använda förstärkt verklighet blir det möjligt att tillföra information till den verkliga platsen. I syfte att applicera förstärkt verklighet har vi utvecklat Lara. Lara är en prototyp av ett spel i form av en virtuell skattjakt som utspelar sig på Campus Valla i Linköping. Den evolutionära prototypen har testats av fyra personer som efter testet svarat på frågor angående användbarheten. Resultatet från testerna visade att användbarheten var god. Testerna visade även att det finns intresse att utöka Lara med både server och editor. Arbetet visade att presentationen av förstärkt verklighet har stor betydelse för hur påtaglig upplevelsen blir. / The performance of mobile phones have increased recently. Thus, it has become relevant with augmented reality in mobile applications. This work has examined how augmented reality is used in mobile applications to focus on a location. By using augmented reality you will be able to add information to a place. In order to apply augmented reality, we have developed Lara. Lara is a prototype of a game in the form of a virtual treasure hunt that takes place at Campus Valla in Linköping.The evolutionary prototype has been tested by four people who afterwards answered questions about usability. Results of the tests showed that the usability was good. The tests also showed that there is interest to expand Lara with both server and editor. The work showed that the presentation of augmented reality have significant impact on how real the experience becomes.

Målet med detta projekt är att ta fram en applikationsprototyp för Androidenheter som ska locka användare av applikationen till och tillbaka till broparken i Skönsberg med hjälp av augmented-reality. Applikationen ska känna av om användaren befinner sig inom eller utanför parkens område och visa olika bilder/modeller på specifika GPS-koordinater i det digitala lagret beroende på användarens positionering. Arbetet har genomförts i samarbete med Dohi på uppdrag av Sundsvalls kommun där regelbundna möten hafts med uppdragsgivaren. Utvecklingen av applikationen sker i PhoneGap med Wikitude-plugin. Projektet har resulterat i en applikationsprototyp som använder ActionRanges, som är en typ av GeoFence, för att presentera olika bilder hämtade från en egen server i det digitala lagret beroende på användarens position. Användarna har inom parkens område möjlighet att själv påverka de bilder som visas i det digitala lagret genom att i applikationen ta en bild som laddas upp till servern där bilderna lagras och där bilden som tagits även visar det digitala lagret.

Arbetet gick ut på att skapa designförslag på informationsstöd för infanterisoldater. För att åstadkomma detta samlades data in genom observation och intervjuer på militärövningsområdet Kvarn i Östergötland. Utifrån det insamlade materialet framställdes en kravlista som i sin tur låg till grund till designprocessen.Tre designförslag framställdes varav ett var på en handleds- eller vapenmonterad display, till största del riktad åt gruppchefer, och de övriga två förslagen huvudmonterade, dessa tänkta att kunna användas av alla soldater i fält. Fokus låg på att på ett så enkelt sätt som möjligt ge tillräcklig information om omgivningen och övriga gruppmedlemmars position för att öka soldatens situationsmedvetenhet och minska belastningen på arbetsminnet.

At present, augmented reality (AR) isn’t used to any significant degree in Sweden. However, the technology is considered as the next step in digitizing the constructionprocess. The development of AR has come a long way over the years but has not until recently begun to take shape as a tool to rely on. The purpose of the study has been to investigate today's AR technology and then identify its uses in the construction industry. The focus has been on investigating the possibilities of an application to prevent construction errors and coordination flaws, but also to see if the technology is useful in other ways in the construction process. The method used was based on a summary of technical reports of AR technology in a literature study. Applications and future possibilities with the technology have been described while the tracking systems and devices behind the applications have been studied. Interviews were conducted with staff at different positions at the workplace, working closely with the design and production. Based on these interviews, uses, advantages, shortcomings and development opportunities with AR to reduce construction errors have been established. The report points out that there are sufficiently good positioning systems currently available for AR to be applied to a construction site and that these are constantlybeing developed. However, further development of AR applications is required to enable them to meet the functions needed to overcome construction errors and coordination flaws. Even the devices that are most advantageous for the construction industry need more work to increase performance and eliminate possible health risks such as dizziness and nausea in constant use. At present, AR can be applied for simpler tasks such as illustrating models during meetings or for sale. / I dagsläget används inte förstärkt verklighet (AR) i någon markant utsträckning i Sverige. Teknologin anses dock som nästa steg i digitaliseringen av byggprocessen. Utvecklingen av AR har kommit långt under åren men har inte förrän nyligen börjat ta form som ett verktyg att förlita sig på. Syftet med studien har varit att undersöka dagens AR teknologi för att sedan identifiera dess användningsmöjligheter inom byggbranschen. Fokuset har legat på att undersöka möjligheterna med en applicering för att förhindra att byggfel och samordningsbrister uppstår men även för att se om teknologin är användbar på andra sätt i byggprocessen. Metoden som användes utgick ifrån en samlad information från tekniska rapporter om tekniken bakom AR i en litteraturstudie. Användningsområden och framtida möjligheter med tekniken har beskrivits samtidigt som de spårningssystem och enheter bakom applikationerna har studerats. Intervjuer utfördes med personal på olika positioner på arbetsplatsen som arbetar nära projekteringen och produktionen. Utifrån dessa intervjuer har användningsområden, fördelar, brister och utvecklingsmöjligheter med AR för att minska byggfel fastställts.Rapporten pekar på att det finns tillräckligt bra positioneringssystem i dagsläget för att AR ska kunna tillämpas på en byggarbetsplats och att dessa kontinuerligt utvecklas. Det krävs emellertid ytterligare utveckling av AR-applikationer för att dessa ska kunna uppfylla de funktioner som behövs för att avstyra byggfel och samordningsbrister. Även de enheter som är mest fördelaktiga att använda för byggbranschen behöver mer arbete för att öka prestandan och avstyra eventuella hälsorisker som yrsel och illamående vid ett konstant användande. I dagsläget kan AR appliceras för simplare uppgifter som att illustrera modeller under möten eller för försäljning.

The technology of “augmented reality” has existed in an experimental stage since the early 1990s, but it is not until around year 2010 that commercial use in the form of both hardware and software became available, for example, when Pokémon GO and Google Glass were announced. The aim of this thesis is to develop a mobile application that utilizes the technique of augmented reality to gain an insight into the technique’s potential, as well as the various tools available in this type of development. The project resulted in an augmented reality application, written in the program language Kotlin for the mobile operating system Android. The main use of the application includes group activities such as tourism, as the main functionality is to visualize other users' location via the mobile camera using the tools ARCore and Azure’s database Cosmos DB. Even though the technology is relatively new, the work has progressed without major difficulties, and even with basic programming knowledge it is possible to do software development in this area.

Förstärkt verklighet eller Augmented Reality (AR) är idag en av de viktigaste riktningarna inom informationsteknologiområdet (IT). AR-tekniken har redan använts inom områden såsom underhållning, konstruktion, medicinsk behandling, utbildning och är tillgänglig i flera olika enheter som till exempel mobiltelefoner, surfplattor, etcetera. Under de senaste åren har allt snabbare framsteg gjorts inom mobilapplikationer som erbjuder AR-upplevelser, men det finns fortfarande ett behov av en djupare förståelse för hur en bättre användarupplevelse eller User Experience (UX) kan designas i dessa Augmented Reality Mobile Applications (ARMA). Detta examensarbete fokuserar på de aspekter av interaktionen som måste beaktas när ett grafiskt användargränssnitt baserat på ARMA utformas i syfte att göra applikationerna kontextkänsliga. Det betyder att hjälpa användaren få relevant information som passar situationen eller den kontext denne befinner sig in när hen använder sin mobiltelefon och därmed erbjuda hen bättre användarupplevelser. Studien omfattar en heuristisk utvärdering och ett användbarhetstest av mobilapplikationen Layar som bland annat känner igen olika Points of Interest (POI) och som ger direkt digital kontextuell information om dem. Baserat på resultatet av den heuristiska utvärderingen och användbarhetstestet i kombination med tidigare forskning inom området, har åtta stycken designriktlinjer tagits fram. Jag hoppas att dessa riktlinjer kan fungera som ett stöd vid utformningen av gränssnittet på kontextkänsliga ARMA och i förlängningen förbättra användarupplevelsen.