芸術科学会論文誌 投稿用カバーシート ■ 論文種類(以下のうちから一つ選択) ・原著論文 フルペーパー ■ 論文分野(1)~3)のうちから一つ選択) 2) 科学系分野 ■ カテゴリ(1個以上選択) a-7) 音声処理技術 b-1) ヒューマンインタフェース b-5) マルチメディアシステム ■ 該当特集(以下のうちから一つ選択) ・一般論文 ■ 論文題名(和文、英文) JackTopGuitar: オーディオビジュアルパフォーマンスのためのギターと音声入力を使用したライブインタフェース JackTopGuitar: Combined Live Interface Using Guitar and Microphone for Audio-Visual Performance ■ 著者名(和文、英文) 著者名1 大谷泰斗 (非会員) 著者名2 越智景子 (非会員) 著者名3 大淵康成 (正会員) … Taito Otani (Non-Member) Keiko Ochi (Non-Menmber) Yasunari Obuchi (Member) … ■ 著者所属(和文、英文) 著者1) 東京工科大学大学大学院バイオ情報メディア研究科メディアサイエンス専攻 著者2,3) 東京工科大学メディア学部メディア学科 ■ 著者e-mail g311702769 @ edu.teu.ac.jp obuchiysnr @ stf.teu.ac.jp ochikk @ stf.teu.ac.jp ■ 連絡担当者の氏名、住所、所属、電話、Fax、e-mail 大谷泰斗 東京都八王子市片倉町1404-1 東京工科大学大学院バイオ情報メディア研究科メディアサイエンス専攻 042-637-2111 g011702769@edu.teu.ac.jp ■ 論文概要(和文400字程度、英文100ワード程度) JackTopGuitarは,ギター・マイク・フットペダルを組み合わせたオーディオビジュアルパフォーマンスのためのデジタルミュージカルインタフェース(DMI)である.ボイスコマンド・ボイスジェスチャ・ギタージェスチャ・ペダル操作を組み合わせることで,投影映像や音楽シーケンサ・エフェクタなどの多様なパラメータをリアルタイムに操作することができる.これにより,即興性の高いオーディオビジュアルパフォーマンスが可能になる.演奏者は,伝統的なエレキギター演奏を踏襲したJackTopGuitarを使うことで,音声入力などを組み合わせたパフォーマンスシステムの制御を可能とし,演奏表現を拡張することができる.映像表現は,ギターや音声入力の演奏結果の単なる可視化ではなく,演奏と一体化したパフォーマンスの一部となる. 本稿では,JackTopGuitarの設計と実装について述べ,ライブパフォーマンスという過酷な環境下における音声認識率についての評価を行う.最後に,このDMIを利用したオーディオビジュアルライブパフォーマンスを行った後に,いくつかの問題についての議論と展望を述べる. JackTopGuitar is a digital musical interface (DMI) that uses an electric guitar, microphone and foot pedal for a computer-based audio-visual live performance. It consists of voice commands, voice gestures, guitar gestures, pedal controls, and their combined actions. The performer can project videos and control various parameters of sequencers and effectors. The interface realizes real-time audio-visual musical performances. JackTopGuitar is based on the traditional electric guitar playing style, and its performing expression is augmented by the extra functions such as speech recognition. Visual expressions are not just visualization of vocal and guitar plays but a part of the performance created by the music and performer’s control. In this paper, we describe the design and implementation of JackTopGuitar. We also conduct evaluation experiments of speech recognition under an adverse condition of live performance. Finally, we make an audio-visual performance using JackTopGuitar and discuss various issues found in the performance. ■ キーワード(和文5個程度、英文5個程度) ライブインタフェース, 音声認識, ボイスコントロール, エレキギター, オーディオビジュアル, live interface, speech recognition, voice control, electric guitar, audio-visual