Über Gesture Synth
Zuletzt aktualisiert: 17. August 2026
Gesture Synth ist ein kostenloses, browserbasiertes Musikinstrument, das deine Webcam in ein Akkord-Pad und ein Theremin verwandelt. Diese Seite erklärt, wer es gebaut hat und wie es funktioniert.
Was es ist
Gesture Synth verwendet MediaPipe Hand Landmarker — ein Open-Source-Modell von Google — um deine Handgesten in Echtzeit zu lesen und ordnet diese Gesten über die Web Audio API Akkorden, Tonhöhe, Lautstärke und Klangfarbe zu. Alles läuft lokal in deinem Browser. Keine Installation, kein Konto, kein Upload.
Wer es gebaut hat
Gesture Synth ist eine neu gestaltete Version des ursprünglichen Open-Source-Tools von Ethan und Eric. Die aktuelle Site fügt Internationalisierung (10 Sprachen), moderne SEO-Metadaten, einen Share-Dialog für Aufnahmen und einen Rekorder, der WebM-Videos exportiert, hinzu.
Wie man spielt
Öffne die Play-Seite, erlaube den Webcam-Zugriff und klicke auf „Audio aktivieren". Strecke deine linke Hand aus und strecke Finger, um Akkordstufen aus I-vi-IV-V-ii auszuwählen. Deine rechte Hand steuert Lautstärke (Höhe), Akkordstil (Finger), Klangfarbe (Handgelenksneigung) und Oktave (Daumen runter). Wechle in den Theremin-Modus für durchgehende Tonhöhe aus der Handhöhe. Die vollständige Zuordnung findest du auf der Guide-Seite.
Technologie
Gebaut mit Next.js 16 (App Router), React 19, MediaPipe Tasks Vision und Web Audio API; Aufnahme über MediaRecorder. Gehostet auf Vercel, ausgeliefert über Cloudflare. Quellenangabe: ursprüngliches Open-Source-Tool von Ethan und Eric.
Kontakt
Fragen oder Feedback? Siehe Kontaktseite.