7月13日(火)PCやスマートフォンのブラウザから3Dキャラクターのモデルをトラッキングして動かせるツール「Kalidoface 3D」が登場しました。開発者はバーチャルデザイナーのRichさん。現在、無料で利用可能です。
「Kalidoface 3D」は顔の表情や全身の動きをWebカメラ(スマホの場合は内蔵カメラ)でトラッキング可能なツールで、まばたきや手の振りなども現実の身体と同期できます。(Safariなどの一部ブラウザでは全身トラッキング非対応の場合もあり)
またカメラを正面だけでなく、背面や横に動かしての撮影もできるようになっています。
3Dモデルは複数のデフォルトアバターを利用可能で、手持ちのVRM対応のモデルもアップロードできます。デジタルコードを利用したほかユーザーとのボイス通話機能も搭載。アバターの背景を変更したり、装飾を入れたりといった細かな調整もできるようになっています。
また2Dアバター用のツールも公開中です。こちらでもWebカメラ(スマホの場合は内蔵カメラ)でトラッキングが可能となっています。今回のツールの登場により、より気軽にVTuber活動やアバターの利用ができるようになりそうです。
Launching my newest #Vtuber web app, Kalidoface 3D! 🎊
Face and full-body tracking for 3D models now available for anyone with a browser and a webcam! #MadeWithTFJS and Mediapipe
Powered by @glitch 🎏Try it out here!
➡️ https://t.co/vbr3ie8RC7 ⬅️ pic.twitter.com/Lk0OLb82CU— Rich 🏴☠️👯♀️☄️🥐 (@yeemachine) July 13, 2021
Peer-to-peer calling for Kalidoface has also been reimagined.
Featuring new dynamic camera options: Take selfies 🤳 with friends 👯♀️ or have conversations in 1st-person.
This #WebXR feature works best on mobile devices with gyroscopes. pic.twitter.com/9D2L5Ts29C
— Rich 🏴☠️👯♀️☄️🥐 (@yeemachine) July 13, 2021
ツールへのアクセスはこちら。
3Dモデル版
https://3d.kalidoface.com/
2Dモデル版
https://kalidoface.com/
(参考)公式サイト