Bewegungssonifikation: Psychologische Grundlagen und Auswirkungen der Verklanglichung menschlicher Handlungen in der Rehabilitation, im Sport und bei Musikaufführungen
Im Rahmen künstlerischer Performances und wissenschaftlicher Forschung gewinnt Bewegungssonifikation als ein wichtiger Teilbereich der Sonifikationsforschung immer mehr an Bedeutung. Sonifikation beschreibt die Übertragung von Daten in Klang und stellt zugleich eine Technik dar, die Klang als Antwort auf Interaktion erzeugt. Bewegungssonifikationen sind spezifischer die Verklanglichung menschlicher Bewegungsdaten. Dabei spielt zumeist die Übertragung von kinematischen oder dynamischen Bewegungsparametern und die Erzeugung intuitiv nachvollziehbarer Bewegungsklänge eine wichtige Rolle. Zentrale psychologische Prozesse und Theorien liegen Anwendungen von Bewegungssonifikationen zu Grunde, wie z. B. die Wahrnehmungs-Handlungs-Kopplung, das Bewegungslernen oder das Embodiment. Disziplinübergreifend sind diese Theorien innerhalb der Sport- und Leistungspsychologie oder der Musikpsychologie gut erforscht, dennoch gibt es ein großes Potential, Effekte auditiven Feedbacks in Form von Bewegungssonifikationen auf grundlegende und spezifische Performance- und Wahrnehmungsprozesse zu untersuchen. Viele Studien, die Bewegungssonifikationen als wissenschaftliche Methode einsetzen, verorten sich im Rehabilitations- und Sportbereich mit dem Ziel, Erkenntnisse über Effekte des Bewegungslernens in speziellen Bewegungsaufgaben zu gewinnen. Es gibt vielversprechende Ergebnisse, die positive Effekte von Bewegungssonifikationen auf die Bewegungsrehabilitation bei Schlaganfällen bezeugen oder auf die verbesserte Gleichgewichts- und Haltungskontrolle. Des Weiteren zeigen Ergebnisse verbesserte Leistungen beim Rudern oder Laufen durch den Einsatz eines auditiven Feedbacks in Form von Bewegungssonifikationen oder natürlichen Bewegungsklängen. Im Musikbereich werden Bewegungssonifikationen oft als Augmentierung digitaler oder traditioneller Musikinstrumente eingesetzt, um zusätzliches auditives Feedback musikalischer Bewegungen als Unterstützung beim Üben des Instrumentes zu nutzen. Zudem berichten viele Tanzstudien über verschiedene Trainingsszenarien, in denen Sonifikationen von Tanzbewegungen neue künstlerische Perspektiven eröffnen und Tänzern in Form einer pädagogischen Rückmeldung helfen können. Wenige Untersuchungen in diesen Bereichen verwendeten jedoch randomisiert-kontrollierte Experimente, stattdessen finden sich zahlreiche Berichte zu Projekten, in deren Rahmen hochtechnologisierte Sonifikationssysteme und Forschungsdesigns für mögliche zukünftige Studien entwickelt wurden. Forscher nutzen Sonifikationen zumeist ohne die verwendeten Sonifikationsstrategien zu evaluieren, weder in Bezug auf Effekte unterschiedlicher Konzepte auditiven Feedbacks auf eine bestimmte Aufgabe, noch im Hinblick auf ästhetische Aspekte des Sonifikationsklanges. Das Ziel dieses Artikels ist es, eine Übersicht zu Forschungsergebnissen aus verschiedenen Anwendungsbereichen von Bewegungssonifikationen zu geben und diese im Hinblick auf beteiligte psychologische Prozesse und verwendete Sonifikationsstrategien zu diskutieren. Dieser Artikel stellt die wichtigsten Definitionen im Bereich der Bewegungssonifikation vor und beschäftigt sich mit zu Grunde liegenden psychologischen Vorgängen. Außerdem fasst er zentrale Studien von Bewegungssonifikationen in der Rehabilitation, im Sport sowie im Musikbereich zusammen und fokussiert dabei sowohl experimentelle Designs als auch Evaluationsansätze von Sonifikationsstrategien. Auf Basis bisheriger Erkenntnisse bietet der Einsatz von Bewegungssonifikationen für die musikpsychologische Forschung ein großes Potential.
Movement sonification, as an important field within the broader framework of sonification, is a growing research area that has aconsiderable impact on both artistic performances and the sciences. Sonification describes the transformation of data into sound, and is atechnique of creating sound in some form of interaction design. Movement sonification can be defined as sonification of human movementdata, mostly by transforming kinematic or dynamic movement parameters with the aim of creating intuitive movement sounds. There arecentral psychological processes underlying movement sonification applications, such as perception-action coupling, motor learning andembodiment. Across disciplines, related theories are well investigated in sport and performance psychology or music psychology, but thereis also a high potential for studying the effects of auditory feedback in form of movement sonification on processes involved in perceptionand performance. Many studies using movement sonification as a scientific method can be found in the rehabilitation and sports domain,Jahrbuch Musikpsychologiejbdgm.psychopen.eu | 2569-5665aiming at reaching insight into motor learning in specific movement tasks. Results of a small number of studies are promising and showpositive effects of movement sonification on motor rehabilitation after stroke, and for improving postural motor learning and balance control.Furthermore, results indicate enhanced performances in rowing and running when using auditory feedback in form of movementsonification or natural movement sounds. In the music domain, movement sonification is applied as an augmentation of traditional or digitalinstruments, assuming that additional auditory feedback of musical movements should support the training on musical instruments.Besides, dance studies report on different training settings in which sonification of dance movements opens a new artistic level and couldhelp in terms of pedagogical feedback. While only a few investigations in this area used randomized-controlled experiments, there aremany technical reports of projects in which sonification systems for specific applications and research designs are described for potentialfuture studies. Researchers often use sonification techniques without any evaluation of different sonification strategies, neither concerningthe effect of various auditory feedback styles on a certain task nor regarding aesthetical issues of the sonification sounds. The aim of thisarticle is to provide an overview of research from different application areas using movement sonification, and to discuss the findings withregard to the underlying psychological mechanisms and applied sonification strategies. This article provides the chief definitions in thecontext of movement sonification and examines the psychological processes involved. Moreover, it gives an overview of movementsonification research in rehabilitation, sports and music by highlighting experimental designs and evaluation approaches of sonificationstrategies. On the basis of present knowledge, the use of movement sonification offers high potential for music psychology research. Keywords: movement sonification, auditory feedback, interaction, perception-action coupling, motor learning, evaluation, rehabilitation,sports, music, dance