10月3日（月）、スマートフォン向けアプリ「ToF AR Lab」に、スマートフォンのカメラだけでVTuberのようにアバターを動かせる「Humanoid Hand」機能が追加されました。アプリは無料で入手できます（Android版は10月11日に機能追加予定）。
「ToF AR Lab」は、ソニーセミコンダクタソリューションズ株式会社が提供するAR開発用SDK「ToF AR」を使ったデモ機能を体験できるアプリ。「ToF AR」は独自のAI処理技術によって、手や指の動きまでスムーズに描写できるのが特徴で、ハンドジェスチャー機能などをARコンテンツに盛り込むことができます。
今回追加された「Humanoid Hand」は、スマートフォンカメラ単独で、上半身の動きをアバターに反映できます。筆者も「iPhone 13 Pro」で実際に試してみましたが、体の位置や傾き、両腕や指先の動きまで、かなりスムーズに反映されていました。
トラッキング精度は「Leap Motion」などの専用デバイスを併用したときに匹敵するほど精細であると感じました。ただし、バックグラウンド起動アプリが多いと「ToF AR Lab」自体が落ちることもありました。なお「ToF AR Lab」の推奨環境はiOS11以上とのこと。
「Humanoid Hand」以外にも、現実空間を読み込んで仮想空間に変換する「SandBoxRoom」や、水中の中にいるような体験ができる「IceWater」、壁などに触れたところからバーチャルな蝶が飛び立つ「Kirigami」など、ARを活用した機能が追加されています。アプリケーションそのものはどちらかと言えば開発者向けですが、興味のある人はぜひ触れてみてください。
iOS版のダウンロードはこちら。
https://apps.apple.com/us/app/tof-ar-lab/id1613821588
Android OS版のダウンロードはこちら（10月11日に拡張リリース予定）。
https://play.google.com/store/apps/details?id=jp.co.sonysemicon.tofar.lab
（参考）プレスリリース
