デイリーランキング

まるで未来の車 メーターやナビを3D表示するダッシュボードが開発中

業界動向

2019/07/17 12:30

NVIDIA、視線追跡搭載で広視野角、高解像度のARデバイスを開発

テック

2019/07/18 11:45

ビッグデータとVRで“街の欲求”可視化、ヤフー・日建・東急らが取り組み

統計・データ

2019/07/16 19:30

VR動画と現実が近づく、11Kのモンスター級360度カメラ「Insta360 Titan」

テック

2019/07/17 18:00

VR関連デモ続々、触覚研究の最前線を探る「World Haptics Conference 2019」レポート

テック

2019/07/17 19:00

MoguLive facebook twitter hatena line

VRの「いま」を掘りだすニュースメディア

MoguraVR

グーグル、モバイルVRヘッドセットでのハンドトラッキング実現に一歩

Vive FocusやMirage Soloなど、PCやスマートフォンを必要としない一体型VRヘッドセットが数多く登場しています。しかし現時点では、ハイエンドのPC接続型ヘッドセットに見られるような、ハンドトラッキングが可能な一体型デバイスはまだ登場していません。

グーグルは、この現状を打破しうる研究成果を発表しています。同社はVRヘッドセットだけでハンドトラッキングが可能になるシステムを開発、実用化への期待を公表しています。

ハンドトラッキングの限界を突破

インサイドアウト方式でヘッドトラッキングとポジショントラッキングを実現した一体型のヘッドセットとしては、LenovoのMirage Soloや、HTC Vive Focusが発売されています。しかしどちらも付属のコントローラーが必要で、ハンドトラッキングの機能は限定的です。

グーグルは公表した論文の中で、このような一体型ヘッドセットのトラッキングの限界について、ハードウェア価格や計算コストが高くなることを原因に挙げています。そして、「(新しいヘッドセットでは)仕組みを単純化するために、モバイルのヘッドセットと同じカメラをトラッキングに使用します。対象物につけるセンサーや、追加のハードウェアは不要です」と記しています。

グーグルは、DaydreamのようにIMU(慣性計測装置)ベースのコントローラーだけでポジショントラッキングを実現しようとしており、将来的にはコントローラーがなくてもハンドトラッキングが可能になるとしています。

グーグルのハンドトラッキングの仕組み

OculusのSanta Cruzのようなインサイドアウト・トラッキングでは、コントローラーに搭載されたマーカーの位置をカメラで認識し、ハンドトラッキングを行っています。一方でグーグルは、マーカーなしにユーザーの腕や手の位置を推定し、トラッキングを行おうとしています。

このためにグーグルは、ヘッドセットを通して見た画像の巨大なデータセットを用意しました。画像は、ユーザーがコントローラーを持つ様子がどう見えるかを示しています。そしてディープラーニング(深層学習)でカメラに画像を認識させ、コントローラの位置を推定させます。

この結果構築されたアルゴリズムを用いることで、新しい画像でもコントローラーの位置をリアルタイムに推定することが可能になります。IMUベースのコントローラーの位置情報を組み合わせれば、正確性を高めることができます。

公開された動画では、ヘッドセットの前でユーザーがコントローラーを動かす様子が見えます。そしてコントローラー自体がユーザーの腕に隠れてしまっても、コントローラーの位置を推定するマーカーは、手の動きを追跡している様子が確認できます。

実用化への道

グーグルがこのコンピューター・ビジョンのトラッキングシステムとアウトサイドイン・トラッキングの結果を比較したところ、「3D空間のトラッキングで平均33.5ミリのずれ」しか生じていないことが判明。30fps、シングルモバイルCPUという条件下でこの結果を出しており、モバイルVRヘッドセットへの応用が可能と結論付けています。

またグーグルは、今回アルゴリズム構築に使ったデータセットの公開を計画しています。他の研究者に活用を促し、トラッキングシステムの改善を図る狙いです。

(参考)Road to VR
Mogura VRはRoad to VRのパートナーメディアです。





VTuberになれる&会える! 新動画配信アプリ「IRIAM」発表

2018/05/07 11:00 VTuber 最新ニュース一覧

スマホでVTuberに! アプリ「ホロライブ」がオーディション開催

2018/05/07 11:00 VTuber 最新ニュース一覧
ニンジャマスクの購入はこちら! Mogura VR Store

「Insta360 Pro 体験説明会」 Advertisement

VR/AR/MR 用語集