Under systemutvecklingsprocesser måste man alltid genomgå ett arbetsmoment där systemutvecklingsobjektet testas för att kvalitetssäkras. Men vem kvalitetssäkrar det arbetssätt som används vid testningen? Denna magisteruppsats går ut på att ta fram ett arbetssätt för att svara på frågeställningen ”Hur vet vi att vi gör rätt?”. Det som vi tog fram är en utvärderingsmetod för testprocess inom systemutveckling. För att utvärderingsmetoden skall vara värdefull tog vi fram ett antal kriterier som vi arbetade mot under framtagningen av metoden. Dessa är funktionalitet, tillförlitlighet, tillämpbarhet, tillgänglighet, trovärdighet och värde/relevans. För att lyckas med vårt mål med studien är det viktigt att vi beaktar det tillvägagångssätt som utnyttjas. Detta gjorde vi genom att vi tillämpade en iterativ process som utgår från design science. Den första iterationen involverade en applicering av det utgångsmaterial som vår metod baserar sig på. Detta resulterade i den första versionen (Alpha) av vår utvärderingsmetod. Under andra iterationen använde vi oss av metametoden MA/SIMM för att utvärdera vår egen utvärderingsmetod. På så sätt tillämpade vi både intern- och teorigrundning. Detta resulterade i den andra versionen (Beta) av vår utvärderingsmetod. I den tredje och även vår sista iteration, applicerade vi vår beta–version av utvärderingsmetoden på ett företag för att på så sätt se ifall utvärderingsmetoden uppnår sina kriterier, men även vidareutveckla metoden ytterligare. Detta resulterade i den slutgiltiga versionen (Release Candidate) av vår utvärderingsmetod. Den slutgiltiga versionen har gått en lång väg från sin utgångspunkt. Genom våra tre iterationer genomförde vi situationsanpassning, intern-, teori- och empirigrundning samt ökat användarvänligheten. Detta för att vår utvärderingsmetod skall kunna stå på egna ben och hjälpa verksamheter att förbättra sina testprocesser genom att besvara frågan ”Hur vet vi att vi gör rätt?”.

Syfte: Denna studie har två huvudsyften, ett praktiskt och ett akademiskt. Det praktiska huvudsyftet är att genomföra en utvärdering av e-tjänsten Nationella Exjobb-poolen (’xjobb.nu’) som drivs av Verket för Högskoleservice (’VHS’). Kopplat till detta har vi haft vårt akademiska huvudsyfte som varit att utvärdera hur väl tre metoder (’Effektstyrning’, ’DEVIS’ och ’Expertutvärdering’) passar för att utvärdera en existerande e-tjänst. Frågor: Vi har utgått från tre forskningsfrågor som med grund i vårt syfte är uppdelade i akademiska och praktiska frågor med inriktning på att utvärdera användbarheten hos en e-tjänst och hur användbara de tre metoderna är för utvärdering av e-tjänst. Forskningsmetod: Vår studie har varit till största delen kvalitativ med inslag av kvantitativ metod och har haft en induktiv ansats. Arbetet har även varit en fallstudie ur det perspektivet att våra studier av metoderna kan ses som fall. Arbetsordningen har varit sådan att vi sammanställde metoderna för att kunna ställa upp dem så att den efterföljande metodjämförelsen blev möjlig. Efter metodjämförelsen har vi sedan tillämpat metoderna på vårt undersökningsobjekt och analyserat resultatet av detta för att få fram vårt utvärderingsresultat. Kunskapsbidrag: Vår studie har ett praktiskt kunskapsbidrag och ett akademiskt kunskapsbidrag. Det praktiska kunskapsbidraget är ett utvärderingsresultat till VHS; att deras sida är funktionell och stödjer de flesta designregler för användbarhet men har ett antal punkter som kan åtgärdas. Det akademiska kunskapsbidraget är i form av ett utvärderingsresultat av de tre metoderna; att metoderna kan användas tillsammans och åtminstone Effektstyrning inte bör användas ensamt vid utvärdering. Vi har även valt att kalla den uppsättning verktyg vi har använt för en metod vid namn S.A.E. – Systematisk Användbarhetsutvärdering av E-tjänst.

För att nybörjaranvändare enklare ska kunna påbörja felfri interaktion med ett system är systemets grad av lärbarhet en viktig aspekt att ta hänsyn till. Trots detta finns inga självklara alternativ till hur lärbarhet ska mätas och utvärderas, framför allt inte på ett snabbt och kostnadseffektivt sätt. Det här examensarbetet har därför bidragit med att lägga en grund för en ny utvärderingsmetod för lärbarhet, SLIM - Simplified Learnability Inspection Method, baserad på relevanta faktorer från befintliga metoder och Linja-ahos (2005) riktlinjer för lärbarhet. Två grupper, experter och icke-experter inom användbarhetsdesign, testade metodens huvudfas individuellt på en prototyp av ett system som ska användas för att skicka SMS via webben. Resultaten från en första validering har visat att metoden i allra högsta grad är tidseffektiv, samt har indikerat att personer så väl med som utan expertkunskaper om användbarhet och lärbarhet kan tillämpa metoden för att i likvärdig utsträckning upptäcka lärbarhetsproblem. SLIM kan därför vara en inkörsport till ett ökat användarfokus hos företag med begränsade medel och att dessa ser nyttan med att designa för användbarhet och lärbarhet.

Inledning: ​Maskininlärning kan användas för att göra förutsägelser påmängder av data. Vi presenterar en studie där vi analyserat data från encykelbarometer som registrerar förbipasserande cyklar vid en cykelväg iMalmö. Genom att komplettera cykeldatan med andra uppmätta värden somexempelvis väder och veckodagar förbättras förutsättningarna förmaskininlärningsalgoritmer att lära sig prediktera antalet registreradecyklar baserat på olika faktorer. För att mäta hur framgångsrik olikakurvanpassningar var togs en utvärderingsmetod fram. Denna metodeffektiviserade arbetet i att använda kurvanpassningar iregressionsalgoritmer för prediktion av cykelbarometerdata.Mål: ​Målet med vår studie var att ta fram en metod för att utvärderakurvanpassningar på insamlad data.Syfte: Vårt arbete syftar på att möjliggöra förbättrade prediktioner avcykelflöden genom maskininlärning. Gällande specifikt förbättrad prediktionpå cykelflöden kan detta leda till mer välinformerade beslut vidstadsplanering.Metoder: ​Vår metod togs fram genom en tudelad process enligt DesignScience, vilket består i konstruktion följt av utvärdering. Konstruktionen varatt ta fram stegen, utvärderingen var analysen av våra resultat produceradeav metoden. Vi bearbetade datamängden från cykelbarometern och SMHI,fyllde igen uppenbara hål i datamängden med data under samma tidsperiodfrån åren innan och efter. På datan från cykelbarometern utförde vikurvanpassningar med olika grader av polynom. Med de ny datamängdernaskrev vi ihop tester med olika maskininlärningsalgoritmer. Vi använde TenFold Cross Validation i våra tester för att skapa ett större statistisktunderlag och underlätta analysen av resultaten.Resultat: ​Utvärderingsmetoden togs fram och kan användas för attutvärdera kurvanpassningar på data.Slutsatser:​ Kurvanpassningar som representerar långtidstrender kanutvärderas med vår metod. Genom resultaten från metoden kunde vi se hurmaskininlärningsalgoritmerna klarar prediktion och hur brakurvanpassningar kan bidra till bättre prediktion av cykelflöden. / Introduction: ​Machine Learning algorithms can be used in prediction onlarge quantities of data. We present a study where we have used data valuesthat we have extracted through the use of curve fittings on bicycle data. Thisdata was retrieved from a bicycle barometer that registers passing bicyclesby a bicycle road in Malmö. By supplementing the bicycle data with othermeasured values like for example weather and weekdays the conditions areimproved for machine learning algorithms in the effort of prediction. Tomeasure how successful each algorithm was a evaluation method wascreated. This method streamlined the work in testing different machinelearning algorithms on the collected data.Objectives: ​Our objective have been to create a method for evaluation ofcurve fittings on collected data.Purpose: ​The purpose of our work is to enable improved predictions ofbicycle flows through machine learning. In regards to improved predictionspecifically on bicycle data this leads to more well informed decisions withinurban planning.Methods: Our method was created through a two part process devised fromthe Design Science principles, which is construction followed by evaluation.The construction was to create our method parts, the evaluation was theanalysis of our results produced by the method. We processed the data fromthe bicycle barometer and SMHI, filled obvious anomalies in the statisticswith data from the year before and after during the same period of time.Upon this data we performed curve fitting with the use of polynomial ofdifferent degrees. With the data we created tests using scikit-learn withseveral different Machine Learning Algorithms. We used Ten Fold CrossValidation to create a larger statistical basis upon which our analysis of theresults is based upon.Results: ​The evaluation method was created and can be used to evaluatecurve fittings on data.Conclusions: Curve fitted data representing long-term trends can beevaluated using our method. Through the evaluation of the method, wecould see how machine learning algorithms are capable of prediction andhow well curve fitted data can contribute to better prediction of cycling.

Syfte: Det övergripande syftet med avhandlingen är att utveckla en intressentbaseradutvärderingsmetod för att utvärdera informationssystem. Jag har valt attkalla utvärderingsmetoden för VISU (Verksamhetsutvecklande InformationssystemUtvärdering). I VISU uppfattas utvärderingsprocessen som en socialprocess där människor arbetar tillsammans för att bestämma sig för egenskaperoch värden hos det informationssystem som utvärderas. Utgångspunkten förutvärderingsprocessen enligt VISU är att utvärdering ska användas praktiskt avmänniskor för att skapa utveckling och förbättring i verksamheter. Frågor: Tvåövergripande forskningsfrågor har drivit avhandlingsarbetet: 1. Hur bör en metodför utvärdering av informationssystem vara utformad för att bidra till enverksamhets utveckling? 2. Vad innebär en pragmatiskt grundad modell för ISUtvärdering? Forskningsmetod: I avhandlingsarbetet utvecklar jag VISU ochundersöker hur metoden fungerar samt vilka konsekvenser som användandet avVISU ger i praktiska utvärderingssammanhang. Forskningsarbetet har bedrivitsenligt Canonical Action Research. Aktionsforskningsstrategin har valts för attmotsvara undersökningsbehovet vid metodutveckling - behovet av att prövametoden i praktiska utvärderingsprocesser där metoden är avsedd att användas.Vidare grundas och förankras VISU i pragmatiska kunskapsteorier och teorier omutvärdering (särskilt intressentmodellen). VISU är också grundad i forskning omIS-utvärdering och förankrad i skolan om interpretativ IS-utvärdering. Kunskapsbidrag: Det praktiska bidraget från avhandlingen är en metod, VISU,för att utvärdera informationssystem. De teoretiska kunskapsbidragen är:rationalitet för en pragmatisk utvärderingsprocess, en multiparadigmmodell förIS-utvärdering samt en modell för utvärderingsbruk. / Purpose: The purpose of the study is to develop an evaluation method forevaluating information systems based on the stakeholder model for evaluation.The method is called VISU (Swedish acronym for IS evaluation for workpracticedevelopment). In VISU, the evaluation process is recognised as a social processwhere people are working together in order to determine the qualities and valuesof the IS under evaluation. The point of departure is that evaluation is to be usedby people in order to make change and betterment. Questions: Two questionshave guided the study: 1) How should a method for evaluation of informationsystems be designed in order to contribute to the development of an organisation? and 2) What is the significance of a pragmatic grounded evaluation model? and 2) What is the significance of a pragmatic grounded evaluation model? Method: The research process has been conducted according to Canonical ActionResearch. The Action Research strategy has been chosen in order to satisfy theresearch needs when doing method development – the need to try the method outin non trivial situations. Further, VISU is grounded in pragmatic knowledgetheories, evaluation theories (stakeholder model) and IS evaluation theories andanchored in the school of interpretive IS evaluation. Contribution: The practicalcontribution from the study is VISU, a method for evaluation informationsystems. The theoretical contributions are rationality for pragmatic IS evaluation,a multiparadigm model for IS evaluation and a model for evaluation use.

Affärssystem som inte har tydliga användargränssnitt tenderar att göra användarvänligheten sämre, vilket i sin tur kan leda till att delar av systemet inte nyttjas effektivt. Det kan därför vara lämpligt att ha en specifik och tydlig processbeskrivning för utveckling av system med hänsyn till användarvänlighet. I detta projekt undersöktes möjligheten att ta fram en processbeskrivning för IT-projekt vid framtagning av ett nytt gränssnitt i ett system. Mer konkret så är frågan som ska besvaras i denna rapport följande: ”Hur ska en utvecklingsmetod eller utvecklingsprocess för IT-system se ut för att tillvarata vetenskapliga, teoretiska och tekniska aspekter på Människa-Dator Interaktion (MDI)?” En fallstudie i detta projekt har utförts på företaget GMP-Systems AB. För att komma fram till ett resultat, och för att få svar på frågeställningen, så har en litteraturstudie på aspekter inom MDI utförts. Dessutom har en analys huruvida teknisk implementation av detta kan åstadkommas med hjälp av ramverk. Vidare har intervjuer genomförts, samt tester där användaren har fått interagera med systemet. Resultatet av feedbacken har sedan analyserats. Detta för att senare kunna bygga prototyper till systemet. I resultatdelen levereras en utvecklingsmetod och en processbeskrivning som är kopplad till den litteraturstudie och de erfarenheter som erhållits från projektets fallstudie. Till företaget GMP-Systems levereras en prototyp, en use-case model[1] med user-stories[2] samt ett sekvensdiagram[3]. [1] Use-Case Model är en beskrivning på åtgärder och handlingar som en användare kan utföra, och definierar interaktionen mellan rollerna i ett system för att utföra ett mål.[2] User-stories är ett verktyg inom systemutveckling för att kunna ta fram en beskrivning av önskad funktionalitet som ofta utgår utifrån ett användarperspektiv.[3] Ett sekvensdiagram visar metodanrop mellan objekt i en tidsbegränsad situation och vilken ordning. / Business systems lacking a clear interface and subsequently a diminished usability, can lead to limited usage or no usage of parts of the system. It may therefore be critical to have a process outlined for the development of such system and its interface to ensure that all parts of the system are used.   The objective of this case study was to investigate whether it is possible to develop a process description for IT projects at the initial stages of the development phase of a new interface in a system. More specifically, the question investigated in this report follows:  “How should a development method or development process for IT systems look to seize scientific, theoretical and technical aspects of Human Computer Interaction (HCI)?” A case study of the project was carried out at the company GMP-Systems AB. A literature-study on aspects of Human-Computer Interaction (HCI) was carried out to arrive at a result and answer the question. Further, an analysis was conducted to consider whether the technical implementation of such process can be accomplished by adopting frameworks. In addition, interviews were conducted with users that have interacted with the system, and an analysis was carried out on the feedback provided to develop prototypes for the system. A development method and process description linked to the literature and the experience gained from the projects case study is outlined in the result section. To the client, GMP-Systems, a prototype, a use-case model[1] with user-stories[2] and a sequential diagram[3] will be delivered.  Keywords: HCI, evaluation method, Angular JS, Knockout JS, React, Moqups, process description, development method. [1] Use-Case model is a description of actions that a user can perform and defines the interaction between the roles of a system to accomplish a goal[2] User stories are a tool in system development to provide a description of the desired functionality, often from an end user perspective.[3] A sequential diagram shows how objects operate with one another and in what order.

As the use of Smartphones has increased, the number of mobile applications has grown at an exponential rate. The increasingly higher number of mobile applications has led to a higher demand of studying human-computer interaction within mobile applications. Human-computer interaction (HCI) is the study of how people more efficiently can interact with a system. One field of study within HCI is user experience (UX), which studies how well a user perceives the use of a system in terms of pleasure, affect, aesthetics and fun. Another field within HCI is usability, which measure how well a user can interact with or use a system. The purpose of this thesis was to create design improvements to increase the user experience in Shownight’s mobile application. The design improvements were based on a performed evaluation that was defined with help of an initial literature study and consisted of semi-structured interviews in combination with performance measurements and was performed on five participants. Based on the evaluation and literature study, the design improvements for the mobile application could be defined. The design improvements were defined in line with the functions in the head menu: news feed, grid view, search function, event calendar and personal information. The expectation of implementing the design improvements is that the mobile application’s design becomes more intuitive and easy to use and thus, increases the user experience. / Då användningen av Smartphones har ökat, har antalet mobilapplikationer som lanserats växt exponentiellt. Det växande antalet mobilapplikationer har resulterat i ett ökat behov av människa-datorinteraktion inom mobilapplikationer. Människa-datorinteraktion (MDI) är ett forskningsområde som behandlar samspelet mellan användare och datorer. Ett område inom MDI är användarupplevelser (UX), vilket utvärderar användarens uppfattning om systemet med avseende på nöje, känslostämning, estetik och underhållning. Ett annat område inom MDI är användbarhet, vilket mäter hur väl användare kan interagera med eller använda ett system. Målet med denna uppsats är att utvärdera Shownights mobilapplikation och ta fram designförslag för att förbättra användarupplevelsen. Designförslagen togs fram med hjälp av en utvärderingsmetod som baserades på en genomförd litteraturstudie och bestod av en semistrukturerad intervju i kombination med prestationsmätningar. I denna studie utvärderade fem personer mobilapplikationen. Baserat på resultaten från utvärderingen och litteraturstudien kunde designförslagen definieras. Designförslagen var kategoriserade efter varje funktion i mobilapplikationens huvudmeny: nyhetsflöde, rutnät-visualisering, sökfunktionen, eventkalender och personlig information. Förväntningarna av en implementation av de föreslagna designförbättringarna är att mobilapplikationen blir mer intuitiv och lättanvänd och därmed ge en förbättrad användarupplevelse.

Fokus i detta arbete ligger i att konstruera om vissa delar av produkten för lättare och snabbare montering. Huvudproblemen som upptäcks i detta arbete handlar om skymd sikten vid monteringen samt bristande utrymme för installation av komponenter. Arbetet börjar med att formulera undersökningsproblemet och sedan presenteras olika vetenskapliga metoder, relevanta teorier samt genomförandet av arbetet. Nulägesbeskrivning, nulägesanalys samt förbättringsförslag till problemen utförs i genomförandet. På grund av att ingen egen tillverkning sker på företaget har författarna valt att utföra beräkningar istället för att verifiera att lösningarna till problem håller. Resultatet i detta arbete blir att antalet delar och skruvar har minskats samt att sikten och tillgängligheten vid insättning av komponenter har förbättrats, vilket kommer att minska monteringstiden till en viss del.

UX-designperspektivet är väsentlig vid utvärdering av interaktion med alla typer av robotar, men särskilt sociala robotar. Då dessa utvecklas för att utföra viktiga uppgifter i samhället såsom att vara sällskapsrobotar inom äldrevården, skolor med mera. User Experience Design-området har en bred samling av utvärderingsmetoder som människa-robotinteraktion-området kan dra nytta av. Denna studie syftar till att förbättra upplevelse vid interaktion med en social robot. För detta syfte har bland annat litteraturstudier genomförts där identifierades UX-aspekter som är relevanta att fokusera på vid utvärdering av förutsättningarna för engagemang i interaktionen mellan människa och social robot samt att det identifierades en kunskapslucka av tillgängliga analytiska utvärderingsmetoder inom människa-robotinteraktion (MRI). För att ta fram en ny analytisk utvärderingsmetod för att främja engagemang med en social robot användes en metodansats som är etablerad för att utveckla just utvärderingsmetoder. Designprocessen av den nya metoden bestod av fem iterativa faser som resulterade Analytisk utvärderingsmetod av engagemang vid interaktion med social sällskapsrobotar (AUEIS). AEUIS är designad för att utvärdera förutsättningarna för att uppnå engagemang vid interaktion med en social robot. Stort fokus lades på den femte fasen där versioner av AUEIS testades av flera UX-designers utifrån kriterierna att AUEIS ska ha hög validitet, vara användbar och ha bra lärbarhet. Testningen genomfördes med fyra UX-designer med olika erfarenheter inom MRI. Resultatet av testningen visade att en UX-designer utan tidigare erfarenhet av att utvärdera MRI kan använda AUEIS utan större problematik. Samtidigt, de framtagna aspekterna för att genomföra utvärderingen med var omfattande för att identifiera problem vid interaktion med en social robot. Det slutliga resultatet av detta är arbete är en komplett analytisk utvärderingsmetod. AUEIS består av sju aspekter som studerar föreutsättningarna för engagemang med en social robot. För att genomföra utvärdering med AUEIS finns det tre faser: Förberedelse, utvärdering och analys. Varje fas har några aktiviteter som följas för att få fram ett resultat om förutsättningarna av engagemang vid interaktionen med en social robot. Resultatet av utvärderingen med AUEIS kommer att bestå av kvalitativa och kvantitativa data. Den kvalitativa data som resulteras kan analyseras för att få en lista med vilka aspekter av engagemang som ej uppfylls av den sociala roboten. Den kvantitativa data kan ge en snabb överblick över vilka aspekter som har flest problem och vilka problem är mest allvarliga. AUEIS utvärderar förutsättningar för engagemang vid interaktion med en social robot och är begränsad till detta på grund av att den utvärderar om den sociala roboten uppfyller de förutsättningarna för engagemang. Därför användarensupplevelse av engagemang utvärderas enbart på ett mindre sätt utifrån hur mycket den sociala roboten uppfyller de förutsättningarna för engagemang. En framtida forskning och utveckling av AUEIS hade varit intressant och behövs för att AEUIS ska kunna utvärdera om användaren är engagerad och i vilken omfattning är hen engagerad. En annan aspekt som kan studeras är användarens engagemang under lång tidsinteraktion, korttidsinteraktion eller olika faser av engagemang. Exempelvis hur utvärderas att användaren påbörjar engagemang med en social robot och hur ska det utvärderas att engagemanget hålls och fortsätter eller om den avbryter och varför utifrån användarensperspektiv. I kapitel 5 (Slutresultat AUEIS-metoden) presenteras metoden samt detaljerade instruktioner över genomförandet presenters i Bilaga 7. / The user experience design (UX) perspective is essential when evaluating interaction with all types of robots, but especially social robots. As these are developed to perform important tasks in society such as being companion robots in geriatric care, schools and more. The User Experience Design area has a wide collection of evaluation methods that the human-robot interaction area can benefit from. This study aims to improve the experience of interacting with a social robot. For this purpose, literature studies have been conducted where UX aspects were identified that are relevant to focus on when evaluating the conditions for engagement in the interaction between human and social robot. A knowledge gap was identified of limited available analytical evaluation methods in human-robot interaction (HRI). In order to develop a new analytical evaluation method to promote engagement with a social robot, a methodological approach was used to develop evaluation methods. The design process of the new method consisted of five iterative phases that resulted in an Analytical evaluation method of engagement in interaction with social companion robots (AUEIS). AEUIS is designed to evaluate the conditions for achieving engagement when interacting with a social robot. Great focus was placed on the fifth phase where versions of AUEIS were tested by several UX designers based on the criteria that AUEIS should have high validity, be useful and have good learnability. The testing was performed with four UX designers with different experiences in HRI. The results of the testing showed that a UX designer without previous experience in evaluating HRI can use AUEIS without problems. At the same time, the aspects developed to carry out the evaluation were comprehensive to identify problems when interacting with a social robot. The result of this is work is a complete analytical evaluation method. AUEIS consists of seven aspects that study the conditions for engagement with a social robot. To evaluate with AUEIS, there are three phases: Preparation, evaluation, and analysis. Each phase has some activities that are followed to obtain a result about the conditions of engagement in the interaction with a social robot. The result of the evaluation with AUEIS will consist of qualitative and quantitative data. The qualitative data that is obtained can be analyzed to get a list of which aspects of engagement are not fulfilled by the social robot. The quantitative data can provide a quick overview of which aspects have the most problems and which problems are most serious. AUEIS evaluates the conditions for engagement when interacting with a social robot and is limited to this because it evaluates whether the social robot meets those conditions for engagement. Therefore, the user experience of engagement is evaluated only in a minor way based on how much the social robot meets the conditions for engagement. Future research and development of AUEIS would have been interesting and needed for AEUIS to be able to evaluate whether the user is engaged and to what extent is. Another interesting aspect to study can be the user experience of engagement whether it is during long-term interaction, short-term interaction, or different phases of an engagement. For example, how to evaluate that the user begins engagement with a social robot and how should it be evaluated that the engagement is maintained and continues or if it interrupts and why from a user perspective? Chapter 5 (End result the AUEIS method) presents the method and detailed instructions on implementation are presented in Appendix 7.

To achieve a shared blueprint for peace and prosperity for people and the planet, the United Nations has defined the 2030 Agenda for Sustainable Development, including economic, social, and environmental sustainability as three pillars. This thesis work is aimed at building a sustainability evaluation framework to investigate the product, which in this study is transformer insulating liquid. What’s more, this study focuses on the sustainability evaluation of the extraction step of the raw material which is crude oil and vegetable oil for insulating liquids. The evaluation method is based on the triangular fuzzy number variables, which represent the ambiguity of linguistic variables. Meanwhile, the sustainable development goals are discussed and developed into feasible evaluation criteria. According to the defined criteria, the performance of each indicator is taken from published literature, reports, and official organization. After that, the sustainability index of each oil is calculated and compared, thus a general sustainable result is given. The result shows that mineral oil is more sustainable than vegetable oil only in economic sustainability, while in other aspects including the overall aspect vegetable oil is more sustainable than mineral oil. Among that, mineral oil performs most weakly in environmental sustainability, while vegetable oil is in economic sustainability. Furthermore, the framework designed is expected to be used to evaluate the entire life cycle of a product and can be referred to in future supply chain improvement, since more indexes can be developed based on the mathematics fuzzy number calculation principle. / För att uppnå en gemensam plan för fred och välstånd för människor och planeten har FN definierat 2030-agendan för hållbar utveckling, inklusive ekonomisk, social och miljömässig hållbarhet, som tre pelare. Detta examensarbete syftar till att bygga ett ramverk för hållbarhetsutvärdering för att undersöka produkten, som i denna studie är transformatorisoleringsvätska. Dessutom fokuserar denna studie på hållbarhetsutvärderingen av utvinningssteget av råmaterialet som är råolja och vegetabilisk olja för isolerande vätskor. Utvärderingsmetoden är baserad på de triangulära luddiga talvariablerna, som representerar tvetydigheten hos språkliga variabler. Samtidigt diskuteras målen för hållbar utveckling och utvecklas till genomförbara utvärderingskriterier. Enligt de definierade kriterierna är prestandan för varje indikator hämtad från publicerad litteratur, rapporter och officiell organisation. Därefter beräknas och jämförs hållbarhetsindexet för varje olja, vilket ger ett generellt hållbart resultat. Resultatet visar att mineralolja är mer hållbar än vegetabilisk olja endast i ekonomisk hållbarhet, medan i andra aspekter inklusive den övergripande aspekten är vegetabilisk olja mer hållbar än mineralolja. Bland annat presterar mineralolja sämst i miljömässig hållbarhet, medan vegetabilisk olja har ekonomisk hållbarhet. Dessutom förväntas det utformade ramverket användas för att utvärdera hela livscykeln för en produkt och kan hänvisas till i framtida förbättringar av försörjningskedjan, eftersom fler index kan utvecklas baserat på matematikens luddiga talberäkningsprincip.