Över en trestegsprocess brukar studien research through design för att utforska narrativ presenterade genom ett multimodalt medium bestående av komponenterna text och stream (ljud). En existerande applikation, Booktrack, har blivit undersökt under studien. Därefter utveckades tre prototyped för att identifiera och förstå hur narrativ design kan formas i förhållande till de två komponenterna. Studien har fokuserat på stream design och på uppfattningen av noveller och fiktiva texter som presenteras genom både text och ljud. Med sitt ursprung i sound studies identifierar studien fem generella och tre specifika stream design principer vid arbete av ljud i relation till text. Utöver dessa indikerar studien att en streams närvaro påverkar hur en läsare visualiserar narrativet. Vidare har studien utforskat narrativ design där båda komponenterna är beaktade. Därigenom markeras potentialen hos den multimodala presentationen att kunna expandera narrativet, genom medveten användningen av både text och stream. Den multimodala presentationen antyder dock att likheten med traditionella noveller och liknande ”tysta” texter både skapade intresse och oro. Sammanfattningsvis förstärkte närvaron av en stream inlevelsen samtidigt som det inhöll risken och förmågan att tvingat vägleda en läsares tolkning och föreställning av narrativet. I ett samtid där multimodala presentationer är tillgängliga genom diverse smart-devices, är det troligt att presentationer i likhet med de som undersökts i studien kan utgöra ett nästa steg i alldagliga presentationer. Ta nyhetsartiklar, annonsering, och informationsbrochyrer som ett par områden utanför noveller och fiktion där liknande multimodala presentationer kan komma att utvecklas och användas i samhället inom en snar framtid. / Through a three-part process employing research through design, this study has explored narratives being presented through a multimodal technical medium consisting of both textual and stream (sound) components. It has examined an existing application, Booktrack, and through developing three separate prototypes, has sought to identify and understand how one might approach a narrative when constructed using the aforementioned components. Specifically, it has explored the stream (sound) design and the perception of novels and fiction texts when presented through both text and sound. Taking on a perspective with its origin in sound studies, the study has identified five general and three specific stream design guidelines for working with sound in relation to text. Moreover, it has indicated that contextually appropriate streams’ presences alongside written text affect how a reader visualizes the narrative. Further, it has explored narrative design with both the textual and stream components in mind. Thereby, it posits a venue where the multimodality of the presentation might be used to expand the narrative presentation, using both the text and the stream as tools to further the narrative. However, it also identifies the similarities of the narrative presentation with the traditional novel and similar silent texts as being an indictment of concern. Namely, participants of the study expressed the stream’s intrusion and impact upon their immersion and visualization of written stories as both immersion enhancing and as forcibly guiding their imagination. In a society where multimodal presentations are available through phones, tablets, and other devices, it seems plausible a multimodal presentation, such as the one explored, might constitute the next step in everyday presentations. Take news articles, advertisements, and information brochures as a few tangible areas where this kind of presentation might be employed in the close future.
Identifer | oai:union.ndltd.org:UPSALLA1/oai:DiVA.org:mau-20550 |
Date | January 2019 |
Creators | Juhlin, Rasmus |
Publisher | Malmö universitet, Fakulteten för teknik och samhälle (TS), Malmö universitet/Teknik och samhälle |
Source Sets | DiVA Archive at Upsalla University |
Language | English |
Detected Language | English |
Type | Student thesis, info:eu-repo/semantics/bachelorThesis, text |
Format | application/pdf |
Rights | info:eu-repo/semantics/openAccess |
Page generated in 0.3126 seconds