Concert Viewing Headphones:音響と映像のインタフェース

“Concert Viewing Headphones”は,人間が音を聴くときの直感的な動作(音の方向に頭を動かせる,耳を澄ます)によって,コンサート映像の特定の奏者を選択しなが ら映像と音を鑑賞できるコンサート鑑賞インタフェースです.小型プロジェクタ,方位センサ,傾斜センサ,距離センサを搭載するヘッドフォンを装着し,セン サが検出した頭部方向やヘッドフォンと手の距離に応じて映像と音が切り替わり,ユーザが任意に特定の奏者に注目することが可能です.映像はヘッドフォン上 部の小型プロジェクタから出力され,ユーザの前方と左右の3面の壁(またはスクリーン)に投影します.本インタフェースでは,コンサートのステージ全体を 収めた180°の映像を使用しており,このような画角の広い映像を前方1面のモニタ等に投影すると視覚的に不自然となるため,3面の壁に投影し,ステージ の端にいる奏者も中央の奏者も均一に観ることが可能となります.また,ステージの至る箇所で録音された複数の音源を,現在投影されている映像の中心に近い 奏者の演奏音ほど強調するようにミキシングしてヘッドフォンから出力します。


▲Youtube (MP4 ダウンロードはこちら)

cvh_1
▲Concert Viewing Headphones

 

cvh_2
▲システム全体図

 

論文

浜中雅俊, 李昇姫: “コンサートスコープヘッドフォン”, 日本バーチャルリアリティ学会論文誌, Vol.18, No.3, pp.227-236, 2013. [PDF]

Masatoshi Hamanaka, Seunghee Lee: Concert Scope Headphones, International Computer Music Conference 2013(ICMC2013), August 2013. [PDF]

Kazuya Atsuta, Masatoshi Hamanaka SeungHee Lee: Concert Viewing Headphones, International Journal of Computer Games Technology, Vol. 2011, Article No. 10, 2011. [PDF]

宮下佐和子, 厚田和也, 宇佐美敦志, 浜中雅俊, 李昇姫: CONCERT VIEWING HEADPHONES: 音と映像によるコンサート鑑賞インタフェース, インタラクション2011, pp 3INH-5, 2011. [PDF]

Sawako Miyashita, Masatoshi Hamanaka, Seunghee Lee: CONCERT VIEWING HEADPHONES ,Internaional Conference on Advances in Computer Entertainment Technology(ACE2010), pp. 108-109, November 2010. [PDF]