小室哲哉氏が理研AIP音楽情報知能チーム客員主管研究員に着任
AIを用いた作曲支援システムの開発を実施してきた理化学研究所 革新知能統合研究センター(AIP) 音楽情報知能チームに音楽家の小室哲哉氏が客員主管研究員として着任いたしました。音楽情報チームで研究開発が進むシステムの試験的利用を通してAIによる音楽制作支援の在り方について探求していきます。 音楽情報知能チームの浜中雅俊チームリーダーはGTTMと呼ばれる、音楽の構造を分析する理論の研究を18年前から継続しており、2つのメロディの中間的なメロディを数式のような演算で求めるメロディモーフィング手法などを研究してきました。近年、GTTMによる音楽構造分析にAIを活用することで飛躍的に分析性能が向上し、音楽構造に基づくメロディ操作の実用化が近まっています。 小室哲哉氏は、当時は使用にあたって特別な専門知識が必要であったシンセサイザー・シーケンサーを一般の人でも操作可能とするため、ヤマハ製シンセサイザー・EOSシリーズのボディのデザイン、基本コンセプト、プリセット・ボイスの作成・提供など全面にわたって監修を行うとともに、ユーザとして使用することで開発へのフィードバックを行ってきました。また、ハードディスクレコ―ディングの専用機が存在しない当時に、FMシンセサイザー、サンプラー、ミキサー、シーケンサーなどを統合した最先端の音楽制作環境であった「シンクラビア」のサンプラーの機能を利用してデジタルレコーディングを実現してきました。 なお⼩室哲哉⽒が制作してきた膨⼤な数の楽曲はGTTM による⾳楽構造分析を開始しております。
新コンテンツ
国立環境研究所が提供した野鳥コンテンツを公開
国立環境研究所 生物多様性領域 福島地域協働研究拠点では、福島県の帰還困難区域とその周辺で野鳥の声のモニタリングを行いその音声から種を判別するイベント「バードデータチャレンジ」を2015年から2018年に渡って開催してきました（現在は新しい形での開催を模索しています）。一方、理研AIP音楽情報知能チームでは、AIによる顔画像認識、ジャスチャー認識を使ってパートごとの楽器音の聴き分けを楽しむiPhoneアプリ、SoundScopePhoneを開発・公開してきました。アプリに国立環境研提供の野鳥の声コンテンツを追加することで、野鳥の声の聴き分けを体験することが可能になりました。 紹介用映像の出演はHaruhi Nakajimaさん。 背景映像およびその地名は国立環境研究所の哺乳類調査などで360度撮影をしたものを用いています。それぞれの野鳥の声が聞こえそうな（観測される可能性のある）環境を示していますが、必ずしもその地点で映像で示した野鳥が記録されているわけではありません。 野鳥の声(Wild Birds)はSoundScopePhoneのアプリの更新あるいは新規インストールによってダウンロード可能となります。今回のアプリの更新によって滋賀県在住のギタリストDaisuke Hashimoto氏による提供曲「鋼鉄魂2022」もダウンロード可能となります。