Oculus、音声からVR内のアバターの口の動きを表現するプラグインを公開

Oculusは、ゲームエンジンUnity向けに、音声からVR内のアバターの口の動きを表現するプラグインを公開しました。

https://www.youtube.com/watch?v=tGbOGpfsc8M

このプラグインを使用することで、コミュニケションツールでアバターを使う際、表情認識をすることなく音声認識によりアバターの口を動かすことが可能になり、より自然なアバター同士のコミュニケーションが可能になります。

Oculusによると、このプラグインで使用されている「特定の発音から唇や表情などを表現する機能」はvisemeと呼ばれています。今回公開されたプラグインでは、sil, PP, FF, TH, DD, kk, CH, SS, nn, RR, aa, E, ih, oh, ouなど合計15の音に対応しているとのこと。向い合ってコミュニケーションをとっているときに、発音のとおりに顔が動くという要素は、アバターをより人間らしくします。

Gear VR向けに公開されているソーシャルVRアプリOculus Socialにはこのプラグインがさっそく実装されており、ライブボイスチャットを行う際に、発音の通りに表情が変化する様子を確認することができます。

アバターの動きを現実のプレイヤーの動きと同期させることで、アバターの人間らしさが増すという事例では、年明けに公開したFaceRigとLive2Dの組み合わせの例などもあります。

今後、より自然なアバターの表現の実現に向けた取組も増えてくることが予想されます。

(参考)
Road to VR / Oculus Launch Avatar Lip Sync Plugin for Unity
http://www.roadtovr.com/oculus-launch-avatar-lip-sync-plugin-for-unity-5/

※米Road to VRとMogura VRはパートナーシップメディアです。

Mogura VRの新サービス!
VR体験施設の検索サイト「Taiken.tv」
VR体験施設の検索サイト「taiken.tv」
公式Twitterはこちら!

この記事を書いた人

  • 慶應義塾大学法学部政治学科卒業後、環境省に入省。環境白書の作成等に携わる。ECベンチャー勤務を経て、現Mogura VR編集長、株式会社Mogura代表取締役社長。VRジャーナリスト。
    VRが人の知覚する現実を認識を進化させ、社会を変えていく無限の可能性を感じ、身も心も捧げている。VR/AR業界の情報集約、コンサルティングが専門。また、国外の主要イベントには必ず足を運んで取材を行っているほか、国内外の業界の中心に身を置きネットワーク構築を行っている。

    Twitter:@tyranusii

  • Mogura VR編集部では、ライター・編集者を募集しています!