Gesture Synth auf dem iPhone: Air Instruments, die du mit den Händen spielst
Musaic macht aus der Frontkamera des iPhones sieben Instrumente, die du in der Luft spielst, ohne den Bildschirm zu berühren: Chords, Penta, Halo, Theremin, Bellows, Handpan und Rails. Die Kamera verfolgt deine Hände, und in einem Videoprojekt filmt sie dich gleichzeitig. Die Aufnahme ist also ein Video von dir beim Spielen, nicht nur der Ton. Du kannst beim Spielen singen, und deine Stimme landet auf einer eigenen Spur namens Voice. Die Air Instruments sind kostenlos und als Beta markiert.
Musaic - Recording Studio ist kostenlos für iPhone und iPad. Wo ein Schritt Musaic Pro braucht, steht es in der Anleitung. Die Oberfläche der App ist auf Englisch; die Anleitung nennt die Knöpfe so, wie die App sie zeigt.
Du brauchst: Die Frontkamera, deine Hände im Bild und etwas Licht. Stell das iPhone ab, damit du beide Hände frei hast.
-
Air Instruments öffnen
Tipp auf Add layer und wähl Air instruments ("Played with your hands in front of the camera").
-
Ein Instrument wählen
Nimm eines der sieben. Zu jedem gibt es eine kurze Erklärung mit den Bewegungen.
-
Die Hände zeigen
Solange die Kamera keine Hand sieht, sagt der Recorder Hold a hand up to the camera.
-
Spielen und singen
Nimm auf, während du spielst. Instrument und Stimme können als zwei Spuren landen: das Instrument und eine Spur namens Voice mit deinem Gesang.
-
Chords Beta
Die linke Hand wählt den Akkord über die Zahl der gezeigten Finger, von I bis VII; eine Faust ist eine Pause. Die rechte Hand formt ihn: ein bis vier Finger für die Lage, der Daumen für eine Oktave tiefer, die Höhe der Hand für die Lautstärke.
-
Penta Beta
Jeder Finger ist ein Ton, vom Daumen (tief) bis zum kleinen Finger (hoch). Streck einen Finger, um ihn zu spielen, krümm ihn, um aufzuhören; mehrere Finger ergeben einen Akkord. Die linke Hand spielt eine Oktave tiefer.
-
Halo Beta
Zwölf Töne bilden einen Ring um deine Handfläche, der tiefste oben, im Uhrzeigersinn. Streck einen Finger durch den Ring, um den Ton in dieser Richtung zu spielen.
-
Theremin Beta
Eine Hand gleitet nach links und rechts für die Tonhöhe, ohne Stufen. Die andere Hand hebst du für mehr Lautstärke und senkst sie zum Ausblenden.
-
Bellows Beta
Zieh die Hände auseinander: weiter heißt höher. Drück die Handflächen zusammen, um aufzuhören. Es rastet auf die Tonart des Songs ein, wenn du das nicht abschaltest.
-
Handpan Beta
Die Töne liegen vor dir, tief links, hoch rechts. Leg eine Hand auf einen Ton, um ihn zu halten, oder schlag von oben für einen härteren Anschlag.
-
Rails Beta
Zwei Leisten, eine pro Hand, tief links und hoch rechts; weiter oben heißt ein höherer Ton. Halt eine Hand in ein Feld, um es zu spielen; beide Hände ergeben einen Akkord.
-
Ist das der Gesture Synth von Instagram?
Nein. Gesture Synth ist ein Browser-Instrument von Eric Wei. Das Instrument Chords in Musaic spielt Akkorde mit ähnlichen Handformen, auf dem iPhone, und nimmt dabei das Video und deine Stimme auf. Musaic und Gesture Synth im Vergleich (Englisch).
-
Welche Kamera?
Die Frontkamera, damit du dich beim Spielen siehst. Einen Face-ID-Sensor oder zusätzliche Hardware brauchst du nicht.
-
Gibt es eine Theremin-App fürs iPhone, die ich mit den Händen spiele?
Ja. Theremin ist eines der sieben Air Instruments: Eine Hand gleitet nach links und rechts für die Tonhöhe, die andere hebt sich für die Lautstärke, und die Frontkamera liest beide.
-
Kann ich auf dem iPhone Handpan spielen?
Ja, in der Luft. Handpan legt die Töne vor dir aus, tief links und hoch rechts. Leg eine Hand auf einen Ton, um ihn zu halten, oder schlag von oben für einen härteren Anschlag.
-
Filmt es mich beim Spielen?
In einem Videoprojekt ja: Die Kamera nimmt das Bild zusammen mit dem Instrument auf, und die Aufnahme wird eine Spur wie jede andere. In einem Audioprojekt wird nur das Instrument aufgenommen.
-
Verlässt das Kamerabild mein iPhone?
Nein. Das Hand-Tracking läuft auf dem iPhone selbst, mit Apples Vision-Framework.
-
Kosten sie extra?
Nein. Die Air Instruments sind kostenlos, wie die anderen Instrumente.
Musaic - Recording Studio ist kostenlos im App Store, für iPhone und iPad, und die Air Instruments auch. Musaic Pro nimmt das Wasserzeichen aus dem exportierten Video und bringt Songtexte, Animationen und Akkorderkennung.
- Am iPhone Instrumente spielen, auf dem Bildschirm oder mit MIDI-KeyboardAnleitung
- Die Akkorde deines Songs erkennen und im Video zeigenAnleitung
Geschrieben für Musaic 1.4.0.