Reinforcement learning has seen great improvements in recent years, with new frameworks and algorithms continually being developed. Some efforts have also been made to incorporate this method into music in various ways. In this project, the prospect of using reinforcement learning to make an agent learn to replicate a piece of music using a model of an instrument is explored. Both synthesizers and physically modeled instruments, in particular the Karplus-Strong algorithm, are considered. Two reward functions are introduced to measure the similarity between two audios: one based on frequency content and another based on waveform envelope. The results suggest that audio can be successfully replicated, both using a synthesizer and the Karplus-Strong algorithm. Further research can be conducted on replicating more complex melodies and creatively composing using physical models of instruments. https://github.com/wille-eriksson/RL-instruments / Förstärkningsinlärning är ett fält som har genomgått stor utveckling under de senaste åren, då nya ramverk och algoritmer har tillgängliggjorts. Vissa försök har gjorts för att använda metoden i samband med musik. I detta projekt utforskas möjligheterna att använda förstärkningsinlärning för att lära en agent att återskapa musikstycken med modellerade instrument. Både syntar och fysiskt modellerade instrument, särskilt Karplus-Strongs algoritm, tas i beaktan. Två belöningsfunktioner presenteras för att bedöma likheten mellan två ljudsignaler: en baserad på frekvensinehåll och en annan på vågformshöljet. Resultaten antyder att ljudsignaler kan återskapas med framgång, både med syntar och med Karplus-Strongs algoritm. Fortsatt forskning kan göras för att utveckla ett ramverk som kan hantera komplexare melodier samt skapa kreativa kompositioner med ett fysiskt modellerat instrument. https://github.com/wille-eriksson/RL-instruments

<p>”Gastromax Duo” är ett examensarbete som genomförts inom ramarna för Innovations- och designingenjörsutbildningen vid Karlstads universitet. Projektet har självständigt fullföljts av Joakim Ahlgren och Joakim Lidström under vårterminen 2010. Examensarbetets omfattning är 22,5 hp.</p><p>Uppdragsgivare för projektet är Peter Ottosson och Jonas Eriksson på Sveico AB i Gnosjö. Handledare för projektet hos uppdragsgivaren har varit Peter Johansson. Monica Jakobsson har varit handledare på Karlstads universitet. Lennart Wihk, industridesigner och universitetsadjunkt vid Karlstads universitet, är examinator och har fungerat som handledare och bollplank i designprocessen.</p><p>Sveico AB ligger i Gnosjö och tillverkar köksredskap och andra tillbehör till köksmiljön. I Sveicos produktportfölj återfinns produktserien Gastromax, som riktar sig specifikt till hemmakocken. Gastromax-serien saknar emellertid ett kompakt sönderdelningsredskap för matvaror, vilket föranledde detta produktutvecklingsprojekt.</p><p>Den största enskilda delen i projektet har varit en grundlig förstudie där projektgruppen kartlagt vilka behov och önskemål som finns hos användarna, samt hur marknaden ser ut för produkten. Förstudien består av intervjuer med konsumenter, professionella användare och representanter för handeln samt användarstudier.</p><p>Under produktutvecklingsprocessen har en rad olika idégenereringsmetoder används, såväl internt i projektgruppen, som externt med utomstående individer. Under den påföljande konceptutvecklingsfasen lades stor vikt vid framtagningen av fysiska modeller för utvärdering av idéer och lösningar.</p><p>Av de nitton koncept som sammanställdes från idégenereringsfasen, sållades sex koncept ut med hjälp av systematiska utvärderingsmetoder. De sex koncepten presenterades för uppdragsgivaren, som i sin tur valde ut två av koncepten, vilka projektgruppen vidareutvecklat till det slutgiltiga produktförslaget.</p><p>Den slutgiltiga detaljlösningen omhuldas av sekretess, men tre nyckelegenskaper hos det hopfällbara sönderdelningsredskapet kan noteras:</p><ul><li>Lång rivyta</li><li>Ställbar arbetsvinkel</li><li>Två rivytor, en fin och en grov</li></ul><p>Projektets slutliga resultat är en produktbeskrivning med förslag på övergripande utformning, mekanisk lösning av ställbarheten och materialval för produktens olika delar.</p> / <p>”Gastromax Duo” is a degree project for the Innovation and Design Engineering program at Karlstad University. Joakim Ahlgren and Joakim Lidström have independently carried out the project during Spring Term 2010. The degree project extends 22,5 ECTS credits.</p><p>The assigners for this project are Peter Ottosson and Jonas Eriksson at Sveico AB in Gnosjö, Sweden. Peter Johansson is the project supervisor at Sveico AB and Monica Jacobsson is the academic supervisor at Karlstad University. The examiner at Karlstad University is Lennart Wihk, who has also supported the project team during the design process.</p><p>Sveico AB is located in Gnosjö, Sweden and manufactures kitchen utensils and other kitchen accessories. In the Sveico AB product portfolio resides the Gastromax series of kitchen tools for the ”home chef”. The lack of a foldable grater within the Gastromax series was noticed by the Sveico AB management, which brought about this project.</p><p>The largest part of this project was a very thorough pre-study phase, where the project team mapped out the needs and wishes of the users, along with research about the market of the product. The pre-study consists of interviews with consumers, professional users and representatives of commerce, along with user studies.</p><p>During the product development process, a number of idea generation methods has been used, both internally in the project team and externally with uninitiated individuals. During the subsequent concept generation phase, emphasis was put on the development of physical models, used to evaluate ideas and solutions.</p><p>Out of the 19 concepts that were developed during the concept generation phase, six was chosen through a set of systematic evaluation routines. These six concepts were presented to the assigners that in turn chose two of the concepts for the project team to develop further. These two concepts was then combined and transformed into the final product proposal.</p><p>The final, detailed solution is surrounded with secrecy, but three key concepts in the final foldable grater can be officially stated:</p><ul><li>A long grating surface</li><li>Adjustable work angle</li><li>Two grating surfaces: one fine and one coarse</li></ul><p>The final result of the project is a product description of the grater, with a proposal of a general design, a mechanical solution of the adjustability aspect and a suggestion of materials for the different product components.</p>

”Gastromax Duo” är ett examensarbete som genomförts inom ramarna för Innovations- och designingenjörsutbildningen vid Karlstads universitet. Projektet har självständigt fullföljts av Joakim Ahlgren och Joakim Lidström under vårterminen 2010. Examensarbetets omfattning är 22,5 hp. Uppdragsgivare för projektet är Peter Ottosson och Jonas Eriksson på Sveico AB i Gnosjö. Handledare för projektet hos uppdragsgivaren har varit Peter Johansson. Monica Jakobsson har varit handledare på Karlstads universitet. Lennart Wihk, industridesigner och universitetsadjunkt vid Karlstads universitet, är examinator och har fungerat som handledare och bollplank i designprocessen. Sveico AB ligger i Gnosjö och tillverkar köksredskap och andra tillbehör till köksmiljön. I Sveicos produktportfölj återfinns produktserien Gastromax, som riktar sig specifikt till hemmakocken. Gastromax-serien saknar emellertid ett kompakt sönderdelningsredskap för matvaror, vilket föranledde detta produktutvecklingsprojekt. Den största enskilda delen i projektet har varit en grundlig förstudie där projektgruppen kartlagt vilka behov och önskemål som finns hos användarna, samt hur marknaden ser ut för produkten. Förstudien består av intervjuer med konsumenter, professionella användare och representanter för handeln samt användarstudier. Under produktutvecklingsprocessen har en rad olika idégenereringsmetoder används, såväl internt i projektgruppen, som externt med utomstående individer. Under den påföljande konceptutvecklingsfasen lades stor vikt vid framtagningen av fysiska modeller för utvärdering av idéer och lösningar. Av de nitton koncept som sammanställdes från idégenereringsfasen, sållades sex koncept ut med hjälp av systematiska utvärderingsmetoder. De sex koncepten presenterades för uppdragsgivaren, som i sin tur valde ut två av koncepten, vilka projektgruppen vidareutvecklat till det slutgiltiga produktförslaget. Den slutgiltiga detaljlösningen omhuldas av sekretess, men tre nyckelegenskaper hos det hopfällbara sönderdelningsredskapet kan noteras: Lång rivyta Ställbar arbetsvinkel Två rivytor, en fin och en grov Projektets slutliga resultat är en produktbeskrivning med förslag på övergripande utformning, mekanisk lösning av ställbarheten och materialval för produktens olika delar. / ”Gastromax Duo” is a degree project for the Innovation and Design Engineering program at Karlstad University. Joakim Ahlgren and Joakim Lidström have independently carried out the project during Spring Term 2010. The degree project extends 22,5 ECTS credits. The assigners for this project are Peter Ottosson and Jonas Eriksson at Sveico AB in Gnosjö, Sweden. Peter Johansson is the project supervisor at Sveico AB and Monica Jacobsson is the academic supervisor at Karlstad University. The examiner at Karlstad University is Lennart Wihk, who has also supported the project team during the design process. Sveico AB is located in Gnosjö, Sweden and manufactures kitchen utensils and other kitchen accessories. In the Sveico AB product portfolio resides the Gastromax series of kitchen tools for the ”home chef”. The lack of a foldable grater within the Gastromax series was noticed by the Sveico AB management, which brought about this project. The largest part of this project was a very thorough pre-study phase, where the project team mapped out the needs and wishes of the users, along with research about the market of the product. The pre-study consists of interviews with consumers, professional users and representatives of commerce, along with user studies. During the product development process, a number of idea generation methods has been used, both internally in the project team and externally with uninitiated individuals. During the subsequent concept generation phase, emphasis was put on the development of physical models, used to evaluate ideas and solutions. Out of the 19 concepts that were developed during the concept generation phase, six was chosen through a set of systematic evaluation routines. These six concepts were presented to the assigners that in turn chose two of the concepts for the project team to develop further. These two concepts was then combined and transformed into the final product proposal. The final, detailed solution is surrounded with secrecy, but three key concepts in the final foldable grater can be officially stated: A long grating surface Adjustable work angle Two grating surfaces: one fine and one coarse The final result of the project is a product description of the grater, with a proposal of a general design, a mechanical solution of the adjustability aspect and a suggestion of materials for the different product components.