11月5日、キヤノン株式会社とアイ・ペアーズ株式会社は、ライブコンテンツ制作に向けた実証実験を行いました。リアル人物とバーチャルキャラクターの共演を、マルチカメラで手軽に撮影できる環境づくりが目的です。実験では、両者がじゃんけんをする様子をマルチアングルで撮影しました。
従来のマルチカメラによるバーチャル撮影には、カメラごとのトラッキング機器の設置や、現実空間とバーチャル空間を合わせるキャリブレーションが必要でした。実在しないキャラクターの動きに合わせた構図づくりも難しい作業です。
この課題の解決に使われたのが、キヤノンのマルチカメラ撮影ソリューション「Multi-Camera Orchestration」です。俯瞰カメラの映像解析をもとに、被写体の認識・追尾と複数カメラの構図調整を自動で行います。カメラとステージの位置関係、カメラが出力するFreeDプロトコル(カメラのパン・チルト・ズームなどの情報を送る通信規格)
の情報を用いて、仮想カメラと現実のカメラの撮影状態をそろえる仕組みです。
これにより、外付けのトラッキング機器や複雑な位置合わせは不要になります。キャラクターの動きには、アイ・ペアーズのモーションキャプチャー補正ソフトウエア「n-Links Retarget」を使用しました。演者の骨格をCGキャラクターに違和感なく適用するソフトで、処理速度は秒間120フレームです。従来ソフトで課題だったリアルタイム運用時の不安定さも解消されており、長時間の収録に耐える安定性を備えています。
アイ・ペアーズ代表取締役社長の伊藤衛氏は、カメラがキャラクターを自動で追尾する様子に、その場にキャラクターがいるような臨場感があったとコメントしています。撮影環境の構築・運用の負担を減らせる点も、制作現場にとって大きなメリットだと述べました。
参考
https://prtimes.jp/main/html/rd/p/000001259.000013980.html


