Herzlich Willkommen zum Selbstlernmodul Motion Capturing Tools

Motion Capturing ist eine Technologie zur digitalen Erfassung von Bewegungen, die in vielen Bereichen Anwendung findet – zum Beispiel in Filmen, Videospielen, in der Medizin und den darstellenden Künsten. Sie ermöglicht es, menschliche oder tierische Bewegungsabläufe realistisch auf virtuelle Modelle zu übertragen und damit Animationen, Analysen oder interaktive Anwendungen zu gestalten.

Bewegungen werden mithilfe spezieller Anzüge mit integrierten Sensoren, Kameras oder anderen Erfassungsgeräten erkannt. Diese wandeln die Bewegung in Echtzeit in digitale Medien um. Dabei werden Position und Rotation einzelner Körperteile präzise verfolgt. Diese Daten werden anschließend auf ein virtuelles Modell übertragen, das die aufgezeichneten Bewegungsabläufe detailgetreu wiedergibt.

Das folgende Video erklärt die Funktionsweise spezifischer für den Bereich Musik.

Quelle: Matthias Hamann, Special Studio: Link

Die Idee für die MiMU Gloves stammt von der Musikerin Imogen Heap, die seit 2010 in einem Team einen musikalischen Handschuh entwickelte. Aus diesem Projekt entstand MiMU – ein Unternehmen, das Werkzeuge für Komposition und Live-Performance erarbeitet. Die ersten Prototypen wurden in künstlerischen Experimenten erprobt und auf der Bühne getestet. Die langjährige Zusammenarbeit zwischen Künstler:innen, Softwareentwickler:innen, Textildesigner:innen u.a. hat eine speziell für musikalische Zwecke entwickelte am Körper tragbare Technologie hervorgebracht. Mittlerweile sind die MiMU Gloves allgemein zugänglich und finden weltweit Anwendung in musikalischen und künstlerischen Performances. So beispielsweise zur Steuerung von Stimme, Klängen, Effekten, Licht oder visuellen Elementen.

Quelle: MiMU Gloves: Link

Der Leap Motion Controller ist ein Gerät, das über Infrarotkameras Bewegungen der Hände und Finger als 3D-Bild erfasst. Hierzu werden die Hände über dem Sensor bewegt, ohne ihn zu berühren. Der Controller wird auch im Gaming-Bereich genutzt: Mithilfe des Sensors kann man durch virtuelle Welten navigieren oder - im Fall des Musik machens - Effekte und Sounds steuern. Die aufgenommenen Bewegungsdaten können am Computer weiterverarbeitet und für verschiedene Anwendungen genutzt werden.

Weiterführender Link: AppCosmos 2016: Link

Im folgenden Video wird dir die Funktionsweise des Leap Motion Controllers nochmals genauer erklärt und in der Musizierpraxis demonstriert. Rechts siehst du ein Bild des Leap Motion Controllers.

Das Instrument of Things SOMI-1 ist ein kleiner Sensor, der mit einem Armband - ähnlich wie bei einer Uhr - am Handgelenk befestigt werden kann. Er erfasst bis zu acht unterschiedliche Arten von Bewegungen der Arme, wie zum Beispiel das Heben und Senken oder das Drehen der Arme. Auch den Unterschied zwischen schnellen, impulsiven Bewegungen oder sanften, fließenden Bewegungen erkennt das Instrument of Things. Dadurch können verschiedene klangbezogene Funktionen – etwa Tonhöhe, Filter oder Effekte – gesteuert werden. Bis zu sechs Sensoren lassen sich gleichzeitig einsetzen, was eine breite Palette an Anwendungen im Bereich Musik, Tanz und Performance ermöglicht. Mithilfe der Software Ableton Live lassen sich für das Musizieren Klänge bzw. Effekte den beschriebenen Bewegungsmodi zuordnen und steuern.

Quelle: Instrument of Things: Link

Recht siehst du ein Bild des Instrument of Things SOMI-1. Im folgenden Video wird der bewegungsbasierte MIDI-Controller Instrument of Things SOMI-1 nochmals genauer erklärt und in der Musizierpraxis demonstriert. Ralf Schmid hat das Tool in diesem Video in der Socke.

Du hast bereits eine Vielzahl unterschiedlicher Tools kennengelernt. Zum Abschluss des Moduls findest du im Folgenden eine Übersicht mit weiterführenden Links zu den einzelnen Tools, deren künstlerischen Anwendungsbeispielen und Interviews von Künstler:innen.