Appleは、空間コンピュータ「Apple Vision Pro」向けOS「visionOS 27」の新機能を発表しました。開発者向けアップデートが多数含まれており、RealityKitの強化や新ツールの提供が予定されています。
RealityKitでは、バーチャルオブジェクトが物理的な面に光を投影できる「物理空間ライティング」が追加されます。新たなProjective Textures APIを使えばスポットライトにテクスチャを追加でき、ステンドグラス越しの光や水中の光のゆらぎのような効果も再現できます。リアルタイムの布シミュレーションにも対応し、旗やカーテン、衣服が動きやユーザーの操作に応じて自然に反応するようになります。音響面ではReverb Mesh APIにより、素材ごとの音の吸収・散乱を再現したシミュレーションが行えます。ガウシアン・スプラッティングによるフォトリアルな3Dスキャンデータの効率レンダリングにも対応します。
開発ツールのReality Composer Pro 3にも更新があります。Mac上での変更をApple Vision Proにリアルタイム反映するLive Previewが追加されるほか、Xcodeとの連携強化や生成AIによるアセット制作補助の統合も行われます。
ゲームエンジン対応も拡充されます。「Unity」はvisionOS上でのPlayStation VR2 Senseコントローラーなど空間アクセサリーに対応。「Godot」はCompositorServicesによる完全没入体験をサポートし、RealityKitレンダリングプラグインやPHASE音響プラグインも利用可能になります。なお、GodotもPlayStation VR2 Senseコントローラーに対応予定です。
「Foveated Streamingフレームワーク」のアップデートでは、Apple Vision ProからPCやクラウドサーバーへの接続に対応しており、ユーザーの視線方向に応じたコンテンツの効率的なストリーミングを実現。OpenXRアプリはNVIDIA CloudXR SDKとの統合によりストリーミングエンドポイントとして機能できます。
オブジェクトトラッキングでは高フレームレート追跡が導入され、物体の動きへのポーズ更新頻度が向上します。Create MLの拡張トレーニングオプションにより、手に持った物体への認識精度も改善されます。
Apple Immersive Videoではワイドアスペクト比ポータルに対応し、完全没入モードからポータルモード切り替え時にも広い視野を維持できます。MacからApple Vision Proへのリアルタイムプレビューも実現します。
