이미지: Hacker News (200↑)
摘要
- 开发者Pavel Gurov发布了通过摄像头识别手部动作进行演奏的浏览器版特雷门琴"Air Theremin"
- 支持摄像头手部识别（HANDS）、手机陀螺仪（GYRO）、鼠标替代输入三种演奏方式
- 在浏览器内即可使用4种波形、颤音·震音·回声等效果器以及录音功能
- 제작자
- Pavel Gurov (개인 개발자)
- 기반 프로젝트
- theremin.site
- 입력 방식
- 웹캠 손 인식(HANDS), 폰 자이로(GYRO), 마우스 대체 지원
- 파형 종류
- SINE·TRI·WARM·REED 4종
- 이펙트
- 비브라토·트레몰로·에코·리버브·노트 스냅
- 녹음 기능
- REC/PAUSE 버튼으로 연주 녹음 가능
- 공개 형태
- 설치 없이 브라우저에서 바로 실행
张开双手就会发出声音，合拢双手声音就会中断
在笔记本电脑摄像头前把双手完全张开，音量就会变大;双手合十，声音便戛然而止。开发者Pavel Gurov制作的浏览器乐器"Air Theremin"，仅凭这些动作就能完成演奏。无需安装任何程序或登录，只要打开网页点击开始（START）按钮即可开始。据介绍页面说明，该项目是在theremin.site基础上制作而成。
什么是特雷门琴
特雷门琴是俄罗斯发明家列夫·特雷门在20世纪20年代发明的电子乐器,其特点是演奏者无需接触乐器本身，仅通过双手在两根天线之间的位置来调节音高和音量。其原理是将手靠近或远离天线时产生的电磁场变化转换为声音，而此次的浏览器版本则用摄像头的手部识别技术或智能手机的陀螺仪传感器,来再现相同的体验,以替代实际的天线。
该如何体验
从哪里开始
在浏览器中打开该项目页面,屏幕下方会出现开始按钮。如果是笔记本电脑,就直接利用内置摄像头;如果是智能手机,则利用陀螺仪传感器；两者都没有的环境下也可以用鼠标进行操作。
使用步骤
- 打开页面后,在顶部输入方式菜单中选择GYRO或HANDS其中一种。
- 按下START按钮。手机端只需保持握持设备的姿势静止片刻，系统就会自动根据握持方式完成校准。
- 在HANDS模式下，将双手置于摄像头画面范围内，边看屏幕边调节声音。手离开画面范围后声音会消失。
- 在GYRO模式下,左右倾斜手机可调节音量,前后倾斜可调节音高。画面中的标记一旦超出显示范围,声音就会停止。
- 在屏幕上方的波形菜单中,可从SINE、TRI、WARM、REED中选择所需音色,并可开关混响、音符吸附选项以及颤音、震音、回声等效果器。
- 如果想保留演奏内容,可用REC按钮开始录音,用PAUSE暂停。
谁可以使用
只要有带摄像头的笔记本电脑或智能手机,无需安装其他应用即可直接在浏览器中运行。在两者都不具备的桌面环境下，则可用鼠标输入替代。
可以尝试做什么
比如在视频会议开始前的空闲时间,可以在摄像头前挥手即兴创作旋律;也可以拿着手机坐在原地,用陀螺仪模式安静地实验音高。像跷跷板一样左右晃动设备会产生颤音效果，身体向后倾斜时音色会变暗、空间感增强，反应十分即时，也适合用作简短的声音草图创作。
编辑视角
特雷门琴原本的全部魅力,就在于"无需接触即可演奏"这一点本身的新奇感。实体特雷门琴需要两根金属天线和模拟电路，作为爱好入门门槛较高，而此次的项目则用一台摄像头就把这道门槛降低了。放在以前，想用手部识别做出一件乐器，需要专门的传感器或专用硬件，而如今，仅凭浏览器的摄像头API和手部追踪模型，就能模拟出同样的体验——这正是该项目所展现的变化。
如果国内有团队想参考这类项目,值得关注的核心不在于"精确还原乐器"，而在于"即时反馈"。即便音高不如实体特雷门琴精准，只要一张开手声音就立刻变大、没有延迟感的反馈，就能让用户持续动手体验下去。对于策划基于摄像头交互的个人开发者或小团队而言，与其追求精确度,不如先把预算和时间投入到反应速度上,这样更能大幅提升实际体验质感。
预计在未来数周内,很可能会有人复刻这一代码库，将手部识别替换为面部表情或全身动作的衍生项目问世。因为"仅凭浏览器摄像头运作的乐器"这一形式本身，就很容易引发后续实验。
评论