5月9日(日)Webカメラを使用してキーボード演奏をトラッキングできるアプリ「Virtual Studio」がリリースされました。制作者はなつさん。現在BOOTHで公開中です(Windows推奨)。
「Virtual Studio」は、VRM形式のモデルでキーボードを演奏することに特化したアプリで、VRヘッドセットを使用せずとも、指の動きを同期可能です。必要なものはWebカメラとMIDIキーボード。マイクがあれば口の動きも連動できるそうです。また、自分のVRM形式のアバターの操作も可能。VRMファイルにあらかじめモデルを保存し、設定で選べば自動でセットアップできるとのこと。その他の設定や細かな調整については、下記の動画をご確認ください。
アプリのダウンロードはこちら。
Webカメラでキーボード演奏をトラッキングするアプリ、#VirtualStudio をリリースします!VR機器は不要!
・面倒なセットアップ無しで #VRM が使える
・キャリブレーションがカンタン
・グリーンバックにできる
・マイクでリップシンクできる音楽系 #VTuber に届けー!https://t.co/Jv9h0tUyIh pic.twitter.com/TqngVdNo7B
— なつ@VR (@VRNatsuVR) May 9, 2021
(参考)BOOTH、Twitter