Return to search

Graphical performance software in contexts: explorations with different strokes

This thesis proposes a novel approach to musical software analysis that prescribes testing a given software interface in a wide variety of hardware contexts, each providing unique insights into its design. This work is situated in the general context of graphical software performance, which we define as musical performance through manipulating an on-screen software interface to create music. The analysis strategy is investigated using the Different Strokes (DS) performance environment as a specific example. A series of software extensions to DS were undertaken to extend the application to new hardware contexts and use cases. These include extensions for the use of Different Strokes in an interdisciplinary performance work, d_verse; the adaptation of DS to work on a large multi-touch surface; the integration of a force-feedback input device; and the integration of the libmapper framework, allowing it to be easily interconnected with alternative input and output devices. The thesis also presents a historical overview of graphical software intended for live use, and a background on general issues in interface design for this usage context. An exploratory user test was performed with the force-feedback setup where participants used DS in the presence of simulated physical forces. While there was no clear preference for any of the haptic effects, the different physical forces present are demonstrated to have gestural implications. These kinds of implications should be taken into account when designing mappings from gesture to sound, and in the overall interaction design. / Cette thèse propose une nouvelle stratégie d'analyse de logiciels pour la musique par l'utilisation d'interfaces graphiques dans divers contextes matériels informatiques. Notre travail s'inscrit dans la perspective globale de « graphical software performance » définie ici comme la manipulation d'interfaces utilisateur lors de performances musicales. La stratégie d'analyse que nous proposons a été explorée à partir de Different Strokes (DS), un logiciel conçu pour la création musicale. Pour permettre l'utilisation de DS dans plusieurs contextes matériels et contextes d'utilisation nouveaux, nous avons développé un ensemble d'extensions. Ces extensions ont été élaborées, entre autres, pour l'utilisation de DS dans la série de performances interdisciplinaires d_verse. Nous avons également adapté DS pour qu'il soit compatible avec une surface « multi-touch » de grande taille, nous y avons intégré une interface haptique, et nous y avons ajouté libmapper, une bibliothèque logicielle facilitant l'interconnectivité d'interfaces d'acquisition et de restitution. Cette thèse présente, en outre, un survol de l'histoire des logiciels graphiques conçus pour l'usage en direct et une discussion des problèmes liés à la conception d'interfaces utilisateur dans ce contexte précis d'utilisation. Un test exploratoire a été effectué avec le système haptique intégré à DS. Lors du test, les participants ont utilisé Different Strokes en présence de différentes forces physiques simulées. Bien que nous n'ayons pas observé de préférence claire pour l'un ou l'autre des effets haptiques, nous démontrons que les différentes forces physiques présentes influencent néanmoins la gestuelle. Nous concluons que leur influence doit être prise en considération dans la conception de mappings entre le geste et le son et dans la conception d'interaction en général.

Identiferoai:union.ndltd.org:LACETR/oai:collectionscanada.gc.ca:QMM.114205
Date January 2013
CreatorsZadel, Mark
ContributorsGary Scavone (Supervisor2), Marcelo Wanderley (Supervisor1)
PublisherMcGill University
Source SetsLibrary and Archives Canada ETDs Repository / Centre d'archives des thèses électroniques de Bibliothèque et Archives Canada
LanguageEnglish
Detected LanguageFrench
TypeElectronic Thesis or Dissertation
Formatapplication/pdf
CoverageDoctor of Philosophy (Schulich School of Music)
RightsAll items in eScholarship@McGill are protected by copyright with all rights reserved unless otherwise indicated.
RelationElectronically-submitted theses.

Page generated in 0.002 seconds