AIの事前学習なしでMeta Quest向けアプリで物体検出を可能にする「Zero-Shot Object Detection Kit」が発表されました。
現実の物体を正確に認識する技術を実現するために、従来はAIモデルを学習させる必要があり、この作業には時間と手間がかかっていました。
「Zero-Shot Object Detection Kit」は事前学習していない新しい物体もその場で認識できるゼロショット検出に対応し、予測が難しい環境でも活用できます。光学文字認識（OCR）や、画像内の物体をピクセル単位で識別するセグメンテーションにも対応可能です。
Skip the lengthy AI model training and 𝐝𝐞𝐭𝐞𝐜𝐭 (𝐚𝐥𝐦𝐨𝐬𝐭) 𝐞𝐯𝐞𝐫𝐲𝐭𝐡𝐢𝐧𝐠 for your @Meta Quest app! 🚀
You asked for it. We built it! The most effortless 𝐙𝐞𝐫𝐨-𝐒𝐡𝐨𝐭 𝐎𝐛𝐣𝐞𝐜𝐭 𝐃𝐞𝐭𝐞𝐜𝐭𝐢𝐨𝐧 𝐊𝐢𝐭 – powered by @Microsoft Florence-2, running on @unity… pic.twitter.com/cV2qaYuKO6— XR Bootcamp (@XR_Bootcamp) August 5, 2025
「Zero-Shot Object Detection Kit」Unity上で動作し、MicrosoftのAIモデル「Florence-2」を基盤に採用。NVIDIAのクラウドAPIを利用することで高速処理を実現し、VR/MRデバイス「Meta Quest」シリーズのカメラ映像を直接活用します。ローカル推論のような特別な追加設定や準備は不要とのことです。
（参考）X
