Expériences du développeur avec la nouvelle API de réalité mixte de META

Image: méta

Der Artikel Kann Nur Mit Aktiviertem Javascript Dargellt Werden. Bitte aktiViere JavaScript dans Deinem Browser und Lade die Seite Neu.

Un développeur met l'API récemment publié sur la caméra de passthrough de META, créant une application de football de réalité mixte qui suit une vraie balle dans l'espace virtuel.

Un développeur a récemment partagé ses premières expériences avec la nouvelle API de la caméra de META sur Reddit. Le projet: une application de réalité mixte pour les exercices de football, en utilisant la reconnaissance et le suivi des objets pour apporter une balle physique dans le monde virtuel.

Une courte vidéo de démonstration montre comment cela fonctionne. Les cibles numériques sont projetées sur un véritable mur; Lorsque le développeur donne un coup de pied à un vrai ballon de football et en frappe un, la cible s'effondre pratiquement au sol.

La démo souligne comment le système de caméras de Meta Quest 3 peut combler le jeu physique et numérique – reconnaître les objets du monde réel (dans ce cas, un ballon de football) et les intégrer parfaitement dans les expériences XR.

Source: eMulo2 sur reddit

API de la caméra de passthrough de Meta: élargir la boîte à outils de réalité mixte

L'application est construite à l'aide de l'API de caméra Passthrough nouvellement publiée (PCA), qui est arrivée avec la version 74.0 du SDK Meta XR Core. PCA donne aux développeurs un accès direct aux caméras RVB frontales de la quête, déverrouillant des capacités de réalité mixte plus avancées.

Meta dit que la nouvelle API est conçue pour augmenter la qualité des applications de réalité mixte, permettant des fonctionnalités comme la reconnaissance d'objets – précisément ce que la démo de football du développeur Reddit présente.

À l'heure actuelle, l'API est toujours étiquetée expérimentale. Les développeurs peuvent construire et tester avec lui, mais les applications utilisant la nouvelle interface ne peuvent pas encore être publiées dans le magasin Horizon officiel. Une version complète est attendue dans les prochains mois.

Actuellement, PCA est pris en charge uniquement sur Meta Quest 3 et 3S. Chaque appareil photo peut livrer 30 images par seconde jusqu'à 1 280 × 960 pixels. Cependant, avec la latence comprise entre 40 et 60 millisecondes, le suivi des objets en mouvement rapide ou des détails fins pourrait encore être délicat.