NECの最先端AIをつかった「ANDECHESTRA」誕生!

2020年3月30日yurumusic

世界ゆるミュージックは、NECのAIを活用して、簡単な動作で、子供から大人まで誰でも演奏が可能なインクルーシブ楽器を新たに開発しました!その名も「ANDCHESTRA(アンドケストラ)」!

AIのやさしさで、だれもがミュージシャンになれる楽器を発明。

NECの最先端AI技術群、「NEC the WISE」の力を借りて、新しい楽器を開発するプロジェクトがはじまりました。その名も「ANDCHESTRA(アンドケストラ)」。これまでの、人を選ぶ音楽(OR)でなはく、誰でも受け入れる音楽(AND)を総称した名前です。楽器で挫折したことがある、苦手意識がある、そんなすべての「音楽弱者」のための新しい音楽概念です。

 

2つのANDCHESTRA楽器、トランペットとバイオリン

一つ目は、ANDCHESTRA TRUMPET(アンドケストラ トランペット)。
ANDCHESTRA TRUMPETは、NECの最先端AI技術群「NEC the WISE」の1つで人の視線の動きを推定する遠隔視線推定技術(注3)を活用した、視線の向きによって音を鳴らすAI楽器です。

https://yurumusic.com/instruments/andchestra-trumpet/

二つ目は、ANDCHESTRA VIOLIN(アンドケストラ バイオリン)。

ANDCHESTRA VIOLINは、人の姿勢を推定する姿勢推定技術を活用し、音ごとに定義された姿勢をとることで、音を鳴らすAI楽器です。

https://yurumusic.com/instruments/andchestra-violin/

 

車いすユーザー「インクルーシブアドバイザー」の存在。

アンドケストラ楽器は、「だれもが楽しめる楽器になっているか?」を確認するアドバイザーとして、2人の「インクルーシブアドバイザー」にご協力いただきました。曽塚レナさんとNonokaさんです。

曽塚レナさんは、ゲームのBGMを趣味で作っていましたが、2016年に脊髄を損傷して以来シンガーソングライターとして活動を開始。3/3にはiTunes他音楽配信サービスにてシングル”きみの心臓”を配信するなど、積極的な音楽活動をしています。Nonokaさんは、脳性麻痺により、身体・視覚認知機能などに困難さを抱えているが、優れた聴力・記憶力をもち、おおらかで人が好き。本を読むように音楽を聴き、時折、その曲や歌詞に自らの気持ちを重ね合わせ、自らの想いを母親に伝えるようになる。2019年〝あなたの為の一曲をお選びします〟音楽コンシェルジュとして活動を始めました。

未完成状態の楽器に触れていただきながら、例えばポーズで演奏するバイオリンは「手首の向きなど、繊細な動きも検知して、有機的な音を奏でられるようになると独特の楽器になると思う(曽根レナさん)」「私は脳性まひなんですが、手を後ろに返す動きが難しい。手は基本的に前を向いているポーズにした方がいい(Nonokaさん)」とアドバイスをいただきました。視線で演奏するトランペットは「指で次の音を指し示すなど、ガイドがあると誰にでもわかりやすい(Nonokaさん)」と、こちらも的確なアドバイスを頂きました。

 

曽塚レナさんコメント:「実はチェロをやってみたかったんです。でも、足でおさえるのが難しそうだなと。あと、ピアノのペダルを踏むことができない。楽器で諦めることがあります。でも楽器を諦めている人は、私だけじゃなくて、多いと思う。そんな人に対して、アンドケストラは、『これならできるかもしれない』と感じさせる希望があるプロジェクトだと思いました。色々な人の視点を入れて、どんな人も楽しめるものに育っていってほしい。私はオーケストラ部にいたのですが、人が選ばれている競争の世界でした。でも”AND”な世界なら、「ああ音楽は楽しんでいいんだ」と思えました。これがもっと発展していったら色んな人とのコラボが始まるかもしれない。それがANDということですよね」

NONOKAさんコメント:「ふだんは「音楽コンシェルジュ」をやっています。お客様に「あなたの気分に合わせた曲をお選びいたします」というコンセプトで、音楽をプレゼントしています。今日は、全部の音をちゃんと鳴らせて嬉しかったし、達成感があります。また是非遊んでみたい」

 

なお、今後はANDCHESTRAのさらなる技術向上を目指し、NECのインクルージョン&ダイバーシティの活動に役立てる予定です。具体的には、病院や介護施設などでのリハビリへの活用や、音楽・スポーツ(パラスポーツ含む)イベントへの出展などを検討しています。世界ゆるミュージック協会は、企業のテクノロジーの力も活用しながら、音楽弱者を世界からなくしていきます。

 

<ANDCHESTRAについて>
https://jpn.nec.com/ai/andchestra/