音声入力によりコントロール可能なマルチモーダル演奏システム

摘要

あらまし　本稿では,ギター演奏に用いるエフェクトパラメータを音声入力によりリアルタイムに操作し,そのコントロール値に応じて色情報をフィードバックするマルチモーダルな演奏システムを提案する.本研究はライブ演奏において情報処理技術を用いることにより，音楽表現を拡張することを目的とする.音声入力より音量や音高とレ、つた音響特徴量を抽出し，エフェクタの切り替え，エフェクトパラメータの操作に用いる.また，操作結果に応じて色彩をフィードバックすることにより，マルチモーダルにパラメータの操作を可能にする手法を提案する.