SAGITTARIUS A実験音響スタジオ
JA
研究ノート / インターフェース

まずジェスチャー。それからセンサー。

演奏者の動きを観察することで、表現力のあるコントローラーをどう設計できるか。

動きを起点に、その計測を考える
研究を踏まえた改訂版

動作に名前をつける

押す、なぞる、保持する、離す。この4つには異なる意図があります。センサーを選ぶ前に、それぞれの動作が音楽にもたらす結果を言葉にすると役立ちます。変わるのは音量か、スペクトルか、それともフレーズの構造でしょうか。

動詞と聴こえる結果から始めます。手のひらを近づけてHALOの音色を暗くする、息を強めてAERの電子音を変える、角度を保ってSEREINの粒の流れが薄くなるのを待つ。次に逆向きの動作と休止状態を定めます。音を増やすのは簡単でも止めにくいマッピングは、最初のリハーサル前からフレーズを制限してしまいます。

何を測っているかを取り違えない

静電容量センサーは導電性の物体の接近を捉えますが、力を直接測定するものではありません。鍵盤の位置センサーが示すのは移動量であり、荷重ではありません。演奏者が対応関係を理解できれば、測定値を別の音楽パラメーターへ割り当てることも有効です。

SOMATICでは、生の測定値、ジェスチャーの推定、音楽的な割り当てを分けます。距離センサーなら、距離、正規化した接近量、フィルター周波数に相当します。各段階の単位を明確にします。手の可動範囲を再校正しても表現用の曲線まで変える必要はなく、シンセサイザーを交換してもセンサーの測定内容を定義し直す必要はありません。

誤差の余地を残す

滑らかな手の動きにも小さな揺れがあり、湿度や楽器との接触状態も変わります。デッドゾーンと適度な平滑化は操作を安定させますが、過度なフィルタリングは応答を遅らせ、表現の細部を失わせます。

作動と解除のしきい値を少し離すヒステリシスは、境界付近の細かな切り替わりを抑えます。すべての動きを強く平滑化する処理とは異なります。SEREINのゆっくりした傾きとGRAINの短いアタックには、異なる時間応答が必要です。長いフィルターで不安定さを隠す前に、固定方法、電源、光学部の照明条件、生信号の再現性を確認します。

短いフレーズで確かめる

複雑な作品に進む前に、パラメーターを滑らかに変える、保つ、素早く戻す、という3つの動作の練習曲が必要です。演奏者が結果を再現できなければ、問題は技量ではなく制御マップにあるかもしれません。

演奏者が「音の出始めが遅い」「音量を保ちにくい」「余韻が休符を埋める」といった言葉で応答を伝えられることが大切です。ニナ・ヴェトロワが短いエチュードで動作を試し、Emanuel Galoisが感触とセンサー値を照合してマッピングを調整します。設定と変更理由は、うまくいかなかった案も含めて記録します。

研究から得られる視点

Shierらは、プロの打楽器奏者と共同設計したジェスチャーのマッピングを研究しています。技術は表現を広げる一方、美学を方向づけることもあります。私たちは、最終テストだけでなく開発中も音楽的な意図へ立ち返る理由として捉えています。 [1] Shier et al., 2026

Heyenらは、異なる技能や目的に合わせた練習用の可視化を検討しています。私たちは用途を選んで応用します。技術者には生のセンサー波形が必要でも、演奏者には保持と解除が明確に示される方が役立つ場合があります。 [2] Heyen et al., 2026

要旨より・原文

they also exert aesthetic influence

[1] Shier et al., 2026

実践で確かめる

一つのパラメーターに三段階の目標値を設定します。視覚的な補助あり、補助なしで移行を演奏し、短い休憩後に繰り返します。解除と信号断も別に試します。目標の外れ、疲労、意図しない作動を記録してください。比較で示したいのはグラフの滑らかさではなく、どの音楽的な課題が扱いやすくなったかです。

研究文献

リンクはarXiv上の指定版へ移動します。出版状況は各論文のページで確認できます。研究の対象は著者らのシステムです。Sagittarius A Studioの楽器との関連づけは、私たちの工学的・音楽的な解釈です。

  1. Jordie Shier, Teresa Pelinski, Charalampos Saitis, Andrew Robertson, Andrew McPherson

    Rescuing Performance from the Demo: Co-Designing Drum Gesture Mappings with a Percussionist
    arXiv:2609.08587v1
  2. Frank Heyen, Michael Gleicher, Michael Sedlmair

    Make the Unhearable Visible: Exploring Visualization for Musical Instrument Practice
    arXiv:2601.16708v1
Sagittarius A Studioの制作記録より。改訂ごとに調整方法を見直し、実際の楽器と演奏条件で設定を確認しています。

まだ存在しない音が
思い浮かびますか?

アイデアを相談する