关于 Gesture Synth
最后更新:2026 年 8 月 17 日
Gesture Synth 是一款免费的、基于浏览器的乐器,把你的摄像头变成一块活的和弦板和特雷门琴。本页说明它是谁做的、怎么工作。
它是什么
Gesture Synth 用 MediaPipe Hand Landmarker(一个 Google 开源机器学习模型)实时读取手势,再通过 Web Audio API 把这些手势映射成和弦、音高、音量和音色。一切都在你的浏览器里本地运行。无需安装、无需账号、无需上传。
谁做的
Gesture Synth 是 Ethan 和 Eric 的原始开源工具的二次定制版本。当前站点增加了国际化(10 种语言)、现代 SEO 元数据、可分享录制片段的 Share 对话框,以及导出 WebM 视频的录制器。
怎么玩
打开 Play 页面,允许访问摄像头,然后点击"启用音频"。伸出左手、伸手指,从 I-vi-IV-V-ii 中挑选和弦音阶。右手控制音量(高度)、和弦色彩(手指)、音色(翻腕)和八度(拇指按下)。切换到 Theremin 模式以通过手的高度获得连续音高。完整映射请见 Guide 页面。
技术栈
使用 Next.js 16(App Router)、React 19、MediaPipe Tasks Vision、Web Audio API 构建,录制基于 MediaRecorder。部署在 Vercel,通过 Cloudflare 分发。来源归属:Ethan 和 Eric 的原始开源工具。
联系
有问题或反馈?请见联系页面。