双手就是乐器

Gesture Synth——在线用双手演奏音乐

把摄像头变成乐器。直接在浏览器中用手势控制和弦、转位、音量、八度和滤波效果。

开始 Gesture Synth

摄像头画面仅在浏览器本地处理,不会被录制或上传。

互动乐器

在线演奏 Gesture Synth

允许访问摄像头,然后让双手清晰地保持在画面内。

--
--
Filter: 0%

准备就绪。

视频教程

如何演奏 Gesture Synth

观察双手如何配合,然后在播放器中尝试相同动作。

观看重点

  • 让手腕和指尖始终完整出现在画面中。
  • 先用左手选择和弦,再用右手调整声音。
  • 学习每个控制时,动作要缓慢而明确。
在 Instagram 打开教程

Gesture Synth 创作者 Eric Wei 的教程。

让动作成为音乐

什么是 Gesture Synth?

Gesture Synth 是一款浏览器乐器,通过摄像头手部追踪,把手指姿势、手掌倾斜和移动转换为和弦与声音控制。

简单手势,丰富声音

Gesture Synth 控制与设置指南

01

如何开始演奏?

按下开始按钮,允许摄像头访问,并让双手清晰可见。同一个按钮也会启用浏览器音频。

02

需要什么设备?

需要摄像头、扬声器或耳机、现代浏览器和良好光线,不需要 MIDI 控制器或专用追踪硬件。

03

摄像头视频会上传吗?

不会。本版本不包含录制或上传功能,画面由 MediaPipe 在本地处理。

手势控制

01

左手和弦控制

伸出一至五根手指选择 I–V;食指加小指选择 VI,再加拇指选择 VII。向内倾斜为大调,向外为小调。

02

右手和弦配置

一根手指为原位,两根为第一转位,三根为七和弦,四根为属七或减七和弦。

03

音量、八度与滤波

右手抬高会增大音量。用拇指切换八度,水平倾斜改变滤波。

故障排查

摄像头权限被阻止

点击浏览器地址栏中的摄像头图标允许访问,然后再次点击开始演奏。

你在社交应用内打开了网站

Instagram 和 TikTok 的内置浏览器可能阻止摄像头访问,请改用 Chrome、Safari、Edge 或 Firefox。

为什么检测不到手?

检查摄像头权限、改善光线、让整只手保持可见,并确认其他应用未占用摄像头。

没有声音

点击开始演奏以启用浏览器音频,检查标签页是否静音,并确认扬声器或耳机音量。

常见问题

Gesture Synth 问答

什么是 Gesture Synth?

它是一款浏览器乐器,可把手势转换为和弦和富有表现力的声音控制。

如何开始演奏?

按下开始按钮,允许摄像头访问,并让双手清晰可见。同一个按钮也会启用浏览器音频。

需要什么设备?

需要摄像头、扬声器或耳机、现代浏览器和良好光线,不需要 MIDI 控制器或专用追踪硬件。

摄像头视频会上传吗?

不会。本版本不包含录制或上传功能,画面由 MediaPipe 在本地处理。

为什么检测不到手?

检查摄像头权限、改善光线、让整只手保持可见,并确认其他应用未占用摄像头。

手机和平板可以使用吗?

支持摄像头、WebAssembly、图形加速和 Web Audio 的浏览器可以运行,性能因设备而异。