Image: méta
Der Artikel Kann Nur Mit Aktiviertem Javascript Dargellt Werden. Bitte aktiViere JavaScript dans Deinem Browser und Lade die Seite Neu.
Les documents de support publiés indiquent une version imminente de la nouvelle API de passthrough de Meta.
Meta semble se préparer à la sortie de sa nouvelle API pasthrough, car la documentation a fait surface prématurément dans la section de l'aide de la quête. L'interface, appelée «Permission des caméras de casque», donnera aux développeurs accès aux caméras passshoux frontales du casque.
Selon la documentation, les applications autorisées pourront accéder à des flux de caméras en temps réel montrant la vue imprenable de l'environnement physique.
L'API ouvre plusieurs capacités clés pour les développeurs:
Les applications peuvent reconnaître et intégrer des objets physiques comme des pièces de jeu ou des tableaux pour les jeux de société numériques. Ils peuvent également adapter des expériences en fonction des emplacements détectés – que les utilisateurs soient à l'intérieur, à l'extérieur, à des points d'intérêt spécifiques ou en particulier des types de pièces.
De plus, les développeurs peuvent appliquer leurs propres modèles d'apprentissage automatique aux données de la caméra. Cela permet des fonctionnalités telles que le retexturation, l'ombrage, les jeux impliquant des participants non-têtes, la reconnaissance des personnes / animaux et des applications industrielles et de formation spécialisées.
L'API fournit également des métadonnées importantes aux développeurs, y compris la distance focale, le centre d'image, les dimensions d'image et la position de la caméra par rapport au centre de l'appareil.
Meta a implémenté des garanties de confidentialité – les utilisateurs de quête doivent approuver explicitement l'accès des caméras via une fenêtre contextuelle du casque. Les paramètres d'autorisation montrent quelles applications ont accédé à la caméra au cours de la semaine dernière, et les utilisateurs peuvent révoquer les autorisations à tout moment.
Meta semble avoir publié la documentation de l'API de passhrough (Permission des caméras de casque) de Horizon OS avant sa libération sur leurs documents de support. pic.twitter.com/bwb2nyn320
– Luna (@lunayian) 3 mars 2025
Meta a annoncé l'API Passthrough dès 2024
Meta a annoncé pour la première fois l'API de passhrough lors de la conférence Connect de l'année dernière, promettant une sortie au début de 2025. Mark Rabkin, un Meta Executive, a déclaré que cela « permettrait à toutes sortes d'expériences de RM », y compris des objets suivis, des applications d'IA, des superpositions de fantaisie et une compréhension des scènes.
Jusqu'à présent, Meta a des applications restreintes à l'accès uniquement aux données environnementales abstraites, comme les scans de base de la salle 3D et les contours meubles. L'hésitation de l'entreprise à accorder un accès complet à la caméra provenait probablement des préoccupations concernant le contrecoup potentiel.
Apple permet déjà aux entreprises d'accéder au flux de passthrough de la vision Pro, mais uniquement pour les applications internes – les applications grand public sont exclues. Android XR, annoncé à la fin de 2024, comprendra un accès à la passe du lancement.