Webアプリ · Prototype

Hand Gesture Synth Alpha

Webカメラで両手の動きを認識し、手の距離や指の開きから音程・音量・フィルターを操作するブラウザシンセです。カメラの前で手を動かしながら演奏方法を試せます。

演奏を始める

「Start」を押して、ブラウザへカメラの利用を許可します。カメラ映像の上に両手の認識結果が表示されたら演奏できます。音声の開始にもユーザー操作が必要です。

明るい場所で、両手全体がカメラへ入る位置に立つと認識が安定します。背景と手の輪郭が区別しやすい状態にしてください。

ジェスチャーと音の関係

  • 左右の手の距離で音程を変えます。
  • 右手の指の開きで音量を変えます。
  • 左手の指の開きでローパスフィルターを操作します。

画面には音階のガイドが表示され、現在の音名、周波数、音量、カットオフ、レゾナンスを確認できます。中心音と音域は変更でき、1〜4オクターブの範囲を選べます。

カメラとタッチ操作を組み合わせる

音程、音量、カットオフ、レゾナンスは、それぞれカメラまたは画面上のXYパッドを入力元として選べます。ジェスチャーで音程と音量を演奏しながら、フィルターの一部だけをタッチ操作するといった組み合わせも可能です。

これは演奏方法を探るAlpha版です。カメラや照明の条件によって手の認識結果が変わることがあります。

演奏デモを見る