Return to search

On the Quality of Grey Literature and its use in Information Synthesis during Systematic Literature Reviews / Om kvaliteten på Grey litteratur och dess användning i Information Synthesis under systematiska litteraturöversikter

Context: The Internet has become a vital channel for disseminating and accessing scientific literature for both the academic and industrial research needs. Nowadays, everyone has wide access to scientific literature repositories, which comprise of both “white” and “Grey” literature. The “Grey” literature, as opposed to “white” literature, is non-peer reviewed scientific information that is not available using commercial information sources such as IEEE or ACM. A large number of software engineering researchers are undertaking systematic literature reviews (SLRs) to investigate empirical evidence in software engineering. The key reason to include grey literature during information synthesis is to minimize the risk of any bias in the publication. Using the state of the art non-commercial databases that index information, the researchers can make the rigorous process of searching empirical studies in SLRs easier. This study explains the evidence of Grey literature while performing synthesis in Systematic Literature Reviews. Objectives: The goals of this thesis work are, 1. To identify the extent of usage of Grey Literature in synthesis during systematic literature reviews. 2. To investigate if non-commercial information sources primarily Google Scholar are sufficient for retrieving primary studies for SLRs. Methods: The work consists of a systematic literature review of SLRs and is a tertiary study and meta-analysis. The systematic literature review was conducted on 138 SLRs’ published through 2003 until 2012 (June). The article sources used are IEEEXplore, ACM Digital Library, Springer-Link and Science Direct. Results: For each of the selected article sources such as ACM, IEEEXplore, Springer-link and Science Direct, we have presented results, which describe the extent of the usage of Grey literature. The qualitative results discuss various strategies for systematic evaluation of the Grey literature during systematic literature review. The quantitative results comprise of charts and tables, showing the extent of Grey literature usage. The results from analysis of Google Scholar database describe the total number of primary studies that we are able to find using only Google Scholar database. Conclusion: From the analysis of 138 Systematic Literature Reviews (SLRs’), we conclude that the evidence of Grey literature in SLRs is around 9%. The percentage of Grey literature sources used in information synthesis sections of SLRs is around 93.2%. We were able to retrieve around 96 % of primary studies using Google Scholar database. We conclude that Google Scholar can be a choice for retrieving published studies however; it lacks detailed search options to target wider pool of articles. We also conclude that Grey literature is widely available in this age of information. We have provided guidelines in the form of strategies for systematic evaluation of Grey literature. / Sammanhang: Internet har blivit en viktig kanal för att sprida och få tillgång vetenskaplig litteratur för både akademiska och industriella forskningsbehov. Numera har alla bred tillgång till vetenskaplig litteratur förråd, som omfattar både "vit" och "grå" litteratur. Den "grå" litteratur, som motsats till "vita" litteratur, är icke-vetenskapligt granskad vetenskaplig information som inte är tillgänglig med kommersiella informationskällor såsom IEEE och ACM. Ett stort antal forskare software engineering genomför systematiska litteraturöversikter (systemkameror) för att undersöka empiriska bevis programvaruteknik. Den viktigaste orsaken till att omfatta grå litteratur under Information syntes är att minimera risken för att partiskhet i publikationen. Använda toppmoderna icke-kommersiella databaser som indexerar information kan forskarna göra rigorösa processen att söka empiriska studier i systemkameror lättare. Denna studie förklarar bevis på grå litteratur när de utför syntes i systematiska litteraturöversikter. Mål: Målen med detta examensarbete är, 1. För att identifiera omfattningen av användningen av Grey litteratur i syntes under systematisk litteratur recensioner. 2. För att undersöka om icke-kommersiella informationskällor främst Google Scholar är tillräckliga för att hämta primära studier för systemkameror. Metoder: Verket består av en systematisk litteraturgenomgång av systemkameror och är en tertiär studie och metaanalys. Den systematiska litteraturstudie genomfördes på 138 systemkameror "publiceras via 2003 till 2012 (juni). Artikeln används källorna är IEEEXplore, ACM Digital Library, Springer-Link och Science Direct. Resultat: För vart och ett av de utvalda artikeln källor såsom ACM, IEEEXplore, Springer-länk och Science Direct, har vi presenterat resultat, som beskriver omfattningen av användningen av grå litteratur. De kvalitativa resultaten diskuterar olika strategier för systematisk utvärdering av grå litteratur under systematisk litteraturöversikt. De kvantitativa resultaten består av diagram och tabeller, som visar omfattningen av Grey litteratur användning. Resultaten från analys av Google Scholar-databasen beskriver det totala antalet primära studier som vi kan hitta med enbart Google Scholar databas. Slutsats: Av analysen av 138 systematiska litteraturöversikter (systemkameror) kan vi dra slutsatsen att bevisen för grå litteratur i systemkameror är cirka 9%. Den procentuella andelen Grey litteraturkällor som används i avsnitt informations syntes av systemkameror är cirka 93,2%. Vi kunde hämta omkring 96% av primära studier med Google Scholar databas. Vi drar slutsatsen att Google Scholar kan vara ett val för hämta publicerade studier dock, det saknar detaljerade sökalternativ för att rikta större pool av artiklar. Vi avslutar också att grå litteratur är allmänt tillgänglig i denna tid av information. Vi har försett riktlinjer i form av strategier för systematisk utvärdering av Grey litteratur. / Affan Yasin : Skype id (affan.yasin) Ijlal Hasnain: Skype id (bluesols)

Identiferoai:union.ndltd.org:UPSALLA1/oai:DiVA.org:bth-2198
Date January 2012
CreatorsYasin, Affan, Hasnain, Muhammad Ijlal
PublisherBlekinge Tekniska Högskola, Sektionen för datavetenskap och kommunikation, Blekinge Tekniska Högskola, Sektionen för datavetenskap och kommunikation
Source SetsDiVA Archive at Upsalla University
LanguageEnglish
Detected LanguageEnglish
TypeStudent thesis, info:eu-repo/semantics/bachelorThesis, text
Formatapplication/pdf
Rightsinfo:eu-repo/semantics/openAccess

Page generated in 0.0028 seconds