No description available.

Virtualization is a widely used technology for running multiple operating systems on a single set of hardware. Virtual machines running the same operating system have been shown to have a large amount of identical data, in such cases deduplication have been shown to be very effective in eliminating duplicated data. This study aimed to investigate if the storage savings are as large as shown in previous research, as well as to investigate if there are any negative performance impacts when using deduplication. The selected performance variables are resource utilisation and disk performance. The selected deduplication implementations are SDFS and ZFS deduplication. Each file system is tested with its respective non-deduplicated file systems, ext4 and ZFS. The results show that the storage savings are between 72,5 % and 73,65 % while the resource utilisation is generally higher when using deduplication. The results also show that deduplication using SDFS has an overall large negative disk performance impact, while ZFS deduplication has a general disk performance increase.

Vortrag zu OpenSolaris und ZFS zum UNIX-Stammtisch

Uppsatsen beskriver arbetet och undersökning för hur deduplicering i filsystemet ZFS påverkar effektförbrukningen. En större mängd redundant data förekommer i centraliserade lagringssystem som förser virtualiserade servrar med lagringsutrymme. Deduplicering kan för den typen av lagringsmiljö eliminera redundant data och ger en stor besparing av lagringsutrymme. Frågan som undersökningen avsåg att besvara var hur ett lagringssystem påverkas av det extra arbete som det innebär att deduplicera data i realtid.Metoden för att undersöka problemet var att utföra fem experiment med olika typer av scenarion. Varje scenario innebar att filer kopierades till ett lagringssystem med eller utan deduplicering för att senare kunna analysera skillnaden. Dessutom varierades mängden deduplicerbar data under experimenten vilket skulle visa om belastningen på hårddiskarna förändrades.Resultatet av experimenten visar att deduplicering ökar effektförbrukning och processorbelastning medan antalet I/O-operationer minskar. Analysen av resultatet visar att med en stigande andel deduplicerbar data som skrivs till hårddiskarna så stiger också effektförbrukning och processorbelastning. / This report describes the process and outcome of the research on how the power consumption is affected by deduplication in a ZFS file system. A large amount of redundant data exists in centralized storage systems that provide virtualized servers with storage space. Deduplication can be used to eliminate redundant data and give an improved utilization of available space in this kind of storage environment. The question that the study sought to answer was how a storage systems power consumption is affected by the extra workload deduplication introduces.The method used to investigate the problem was to perform five experiments with different types of scenarios. The difference in each scenario was that the data was written to a storage system with or without deduplication to later analyze the difference. Each scenario had a varied amount deduplicatable data during the experiments which would show if the load on disks changed.The results show that deduplication increases the power consumption and CPU load while the I/O-operations decrease. The analysis of the result shows that increasing the deduplicatable data also increases the power consumption and CPU load.

<p>Denna B-uppsats tar upp prestanda och återställning mellan två vanligt förekommande mjukvarubaserade RAID-system. Mjukvarubaserad RAID har blivit mer och mer intressant eftersom det är ett billigt och bra sätt att skydda sig mot hårdvarufel på hårddiskar. Tidigare har det inneburit prestandaförluster om man inte har använt en hårdvarubaserad RAID kontroller men med dagens snabba processorer är det inte längre så. Hårddiskar går för eller senare sönder och för ett RAID-system som ska vara igång tjugofyra timmar om dygnet är det viktigt att det även då fungerar med bra prestanda. Denna undersökning visar hur mycket sämre prestandan blir under sådana omständigheter samt hur lång återställningstid man kan förvänta sig på ett datorssystem uppbyggt av delar för hemmabruk. Undersökningen utfördes på två olika typer mjukvarubaserad RAID, ett med mdadm på Ubuntu/Linux och ett med RAID-Z på OpenSolaris. På de systemen mättes läs- och skrivprestanda med programmet bonnie++ som skriver och läser en fil som var dubbelt så stor som primärminnet i datorn. Resultatet visar att prestandan försämras med 36 % när en hårddisk går sönder på ett system med mdadm men med RAID-Z ökar istället prestandan. På ett system med mdadm är återställningstiden för ett degraderat system är ungefär lika lång oavsett hur mycket information som finns lagrad på hårddiskarna. Däremot går det fortare med RAID-Z eftersom den på ett intelligent sätt bara återställer den del av hårddisken som används för lagring av filer.</p><p> </p>

No description available.

Denna B-uppsats tar upp prestanda och återställning mellan två vanligt förekommande mjukvarubaserade RAID-system. Mjukvarubaserad RAID har blivit mer och mer intressant eftersom det är ett billigt och bra sätt att skydda sig mot hårdvarufel på hårddiskar. Tidigare har det inneburit prestandaförluster om man inte har använt en hårdvarubaserad RAID kontroller men med dagens snabba processorer är det inte längre så. Hårddiskar går för eller senare sönder och för ett RAID-system som ska vara igång tjugofyra timmar om dygnet är det viktigt att det även då fungerar med bra prestanda. Denna undersökning visar hur mycket sämre prestandan blir under sådana omständigheter samt hur lång återställningstid man kan förvänta sig på ett datorssystem uppbyggt av delar för hemmabruk. Undersökningen utfördes på två olika typer mjukvarubaserad RAID, ett med mdadm på Ubuntu/Linux och ett med RAID-Z på OpenSolaris. På de systemen mättes läs- och skrivprestanda med programmet bonnie++ som skriver och läser en fil som var dubbelt så stor som primärminnet i datorn. Resultatet visar att prestandan försämras med 36 % när en hårddisk går sönder på ett system med mdadm men med RAID-Z ökar istället prestandan. På ett system med mdadm är återställningstiden för ett degraderat system är ungefär lika lång oavsett hur mycket information som finns lagrad på hårddiskarna. Däremot går det fortare med RAID-Z eftersom den på ett intelligent sätt bara återställer den del av hårddisken som används för lagring av filer.

In this thesis, the average throughput of Btrfs and ZFS on Linux is compared by conducting a set of experiments. Btrfs and ZFS are two enterprise-grade file systems that are designed with data integrity and scalability in mind and they bring numerous of other useful features as well. Btrfs is a relatively young file system whereas ZFS is more mature. However, the implementation of ZFS on the Linux platform was released only recently. The main conclusions that can be drawn from the analysis of the gathered data is that Btrfs has improved greatly in recent years and is today showing great throughput whereas ZFS on Linux is performing considerably worse than Btrfs.

Vortrag zu OpenSolaris und ZFS zum UNIX-Stammtisch

Solid State Drives (SSD) blir idag allt vanligare som lagringsmedium och håller på att bli ett alternativ till magnetiska hårddiskar. Denna studie+ har undersökt hur man på bästa sätt kan utnjytta SSDer i en MySQL-databas. Undersökningen genomfördes med hjälp av experiment där prestandamätningar gjordes för att få en klar bild på i vilken konfiguration av SSDs som ger bäst prestanda i MySQL. Mätverktygen som användes var sql-bench och mysqlslap.   Resultaten visar att en databas på en enskild SSD presterar lika bra som en databas med  SSD-cache  under  majoriteten  av  mätningarna  och  visar  bättre  resultat  än resterande konfigurationerna som var en databas på hårddisk och transaktionsloggen på en SSD. / Solid State Drives (SSD) are now becoming  more common as storage and is about to  become  an  alternative  to  magnetic  disks.  This  report  studied  how  to  best  utilize SSDs in a MySQL database. This study was carried out using experiments in which performance benchmarks were made to get an accurate view on which configuration of  SSDs  that  gives  the  best  performance  in  MySQL.  The  benchmarks  where  made with sql-bench and mysqlslap.   The  results  indicate  that  a  database  using  only  SSD  storage  performs  equal  to  a database of solid-state cache under the majority of the tests and shows better results than the remaining configurations that include a database on a single hard drive and a configuration with the transaction log on a SSD.