7月末に開催されたSIGGRAPHのEmerging Technologiesにて、米Google社はVR空間でのアバターに、実世界の顔を持ち込むことが可能になる技術を公開しました。通常、VRを体験中の体験者の顔はヘッドマウントディスプレイ（HMD）によって遮蔽されて見えなくなっていますが、この技術を使うとまるでHMDが透過したように通常の顔が見えます。
このような通常のHMDによって顔が遮蔽された画像が、
このように透過します。
セットアップは非常に単純で、画面の指示通りに顔を縦横に振って、画面上に表示される点を目で追うだけで終わります。所要時間は2,3分ほどでとても短いです。
利用されているハードウェアは、Intel RealsenseなどのRGB-Dカメラ、Oculus Rift DK2、そしてSMI社のアイトラッカーなどの市販で入手可能なものがほとんどです。HMDの中でアイトラッカーを使っているので、目を閉じたり回すとそれに応じて表示されます。さらに、首を振っても正しく表示されます。
ただしHMDの中に実際の顔があるかは検知しないためHMDを外すと顔が２つになってしまいます。
GoogleによるプロモーションビデオではTilt Brushなどのゲームを使ったMixed Reality Captureと合わせて利用されているシーンなどもあり、VRを使ったライブパフォーマンスなどへの応用なども想像できます。
（参考）
Google公式サイト （英語）
https://research.googleblog.com/2017/02/headset-removal-for-virtual-and-mixed.html
