グーグルは、2021年5月19日に開催されたGoogle I/Oにて、開発中の新技術「Project Starline」を発表しました。「Project Starline」は、遠くにいる人同士がまるで目の前にいるかのようなコミュニケーションの実現を目的とし、ハードウェアとソフトウェアを組み合わせた技術プロジェクトです。
カメラと深度センサーを使いリアルタイムで3Dキャプチャ
「Project Starline」は、一見ただの等身大のビデオ通話のように見えますが、そのさらに先を実現するプロジェクトです。
ユーザーの目の前に置かれた高解像度のカメラと深度センサーを組み合わせ、リアルタイムで3Dキャプチャ。生成された3Dモデルを100倍以上に圧縮して伝送し、ライトフィールドディスプレイに投影することで、リアルタイムで3Dでのビデオ通話が可能になります。裸眼で立体視が可能なライトフィールドディスプレイを使うことで、ヘッドセットなどのデバイスを装着することなく、3Dモデルを立体的に見ることができます。
グーグルによれば、「Project Starline」ではコンピュータビジョン、機械学習、リアルタイム圧縮といった各技術に加えて、空間オーディオの技術も使っているとのことで、音の表現にもこだわっていると考えられます。グーグルは、「Project Starline」で表現される人が「まるで目の前にいるかのように感じられる」と自信を見せています。
現在はグーグル社内でテスト中
「Project Starline」は、まだ製品化されていません。現在のところは、グーグル社内でベイエリア、ニューヨーク、シアトルの各オフィスをつなぎ、テストが行われています。
ヘルスケアやメディアなどパートナー企業と試験的な開発を2021年中に開始するとのことです。
グーグルは2021年中にさらにアップデートを届けたいとしており、製品化に向けた続報に期待したいところです。
（参考）Google公式ブログ
