プロシーズラボは、「学ぶ」「働く」「成長する」を支援するプロシーズが未来の新しい価値を創造し続けるために立ち上げた研究開発機関です。VR、MR（※）を活用した新しい学びについて研究しています。
※MRとは Mixed Reality（複合現実）の略です。現実世界にデジタル映像をぴったりと重ね合わせて、自分の指でデジタル映像にタッチすることもできます。
・今回は、MRのデバイスとして注目を浴びているホロレンズ2を使ってピアノレッスンのサンプルアプリを作ってみました。
※ホロレンズ2とは、マイクロソフトが提供している最先端のMixed Realityデバイスです。業務用デバイスとして医療や建設、製造などの各分野に限らず、多くの分野でのビジネス活用が注目されています。
https://www.microsoft.com/ja-jp/hololens
・ホロレンズ2の大きな特徴として「フィンガートラッキング」（指の動きを認識できる仕組み）と「アイトラッキング」（視線の動きを認識できる仕組み）が用意されています。
ぜひ以下のサンプルアプリの動画をご覧下さい。
※再生時は音が流れますのでご注意ください。
■曲：エリーゼのために ベートーヴェン
■曲：メヌエット バッハ
※ホロレンズ2の開発ツール上での画面です
曲のリズムに合わせてバーチャルのピアノ鍵盤が光りますので、自分の指でタイミングよく押せば高得点が得られます。
机の上に、バーチャルのピアノ鍵盤を表示させて、自分の指で机を押すようにしてみるとピアノを弾いている感が増します。
大きなピアノを置けない場所や、マンションなど近所への騒音を気にする方も、自分だけのピアノ練習ができますね。
※ホロレンズ2のデバイスをご用意する必要はあります。
ホロレンズ2がようやく入手できるようになっていますので、このアプリも実機が届きましたら、動作確認する予定です。
今後は、ホロレンズ２の「アイトラッキング」も使い、アプリを使用しているユーザーの視点ログをもとに学習効果の測定にも活用できることを想定しています。
こういった技術を応用していければ、バーチャルでの自主練習用途として、音楽教室様や教育事業を行っている企業様でも活用していけるかもしれませんね。
ホロレンズアプリにご興味お持ちの方は、お気軽に以下のお問合せフォームよりお問合せください。
https://www.pro-seeds.com/contact-point/contact/