De quoi a besoin la réalité mixte pour devenir vraiment étonnante ?

Le lecteur MIXTE Wouter Zelle voulait savoir quelles fonctionnalités manquaient pour faire passer la réalité mixte au niveau supérieur. Voici notre réponse.

Chaque lundi, nous répondons à une question de nos lecteurs. Envoyez votre question à tomislav@mixed.de avec « Question » dans la ligne d'objet, et avec un peu de chance, nous y répondrons le lundi suivant.

La question de cette semaine vient de Wouter Zelle :

Selon vous, quelle fonctionnalité de réalité mixte manque dans la Meta Quest et serait très utile ?

Bonjour Wouter,

Meta Quest 3 a été le premier casque à rendre la réalité mixte abordable pour le grand public, et avec le Meta Quest 3S, moins cher, encore plus de personnes pourront découvrir la réalité mixte pour la première fois.

Gardez à l’esprit que les deux appareils sont des casques de réalité mixte de 1ère génération, ils sont donc encore très limités techniquement. Certaines fonctionnalités de réalité mixte seront améliorées au fil du temps grâce à des mises à jour logicielles, tandis que d'autres nécessiteront un meilleur matériel.

Il y a peu d'informations disponibles à l'heure actuelle sur ce que Meta Quest 4 pourrait apporter en termes de capacités améliorées de réalité mixte, mais les paragraphes suivants vous donneront un aperçu de la direction que prendra le voyage. Pour Meta Quest et les casques de réalité mixte en général.

Le chemin vers la réalité mixte 2.0 est plus progressif que vous ne le pensez

La réalité mixte repose ou échoue sur sa capacité à cartographier la réalité physique et à voir et catégoriser les objets qu'elle contient. Mieux il comprend le monde, mieux il peut l’augmenter ou le mélanger de manière significative avec des éléments numériques.

Meta Quest 3 a une connaissance très limitée de votre pièce. Lorsque vous utilisez la fonction de configuration de l'espace, les capteurs analysent l'environnement de manière très approximative et ne prennent qu'un instantané. Si un meuble est déplacé, il faut à nouveau scanner la pièce, ce qui est très fastidieux.

Outre ces connaissances topographiques imparfaites, Meta Quest manque de beaucoup de connaissances sémantiques. Il permet de distinguer une porte, une fenêtre et une table, mais ne va pas beaucoup plus loin.

Faire passer la réalité mixte au niveau supérieur nécessitera une combinaison de des capteurs plus puissants, numérisation 3D en temps réel en arrière-plan, et meilleure reconnaissance des objets. En d’autres termes, des avancées qui concernent à la fois le matériel et les logiciels.

La réalité mixte bénéficiera de ces avancées technologiques à bien des égards. Les gens auraient besoin de tracer des limites et de scanner leur pièce beaucoup moins souvent, et se sentiraient même plus en sécurité en jouant à des jeux totalement immersifs. Les réalités analogique et numérique fusionneraient plus étroitement, tandis que les objets numériques seraient masqués de manière réaliste par les objets physiques. Et il y aurait bien d’autres applications pratiques de réalité mixte pour la vie quotidienne.

Les prochaines étapes

Dans ce contexte, accès à la caméra pass-through pour les applications de réalité mixte est considéré comme un véritable changement de donne pour la réalité mixte. Actuellement, les applications de réalité mixte ne peuvent accéder qu’à des données environnementales abstraites, telles que le maillage 3D de la pièce et les cadres de délimitation qui représentent des objets individuels. Cela est dû à des problèmes de confidentialité. Grâce à l'accès aux caméras passthrough, les applications de réalité mixte pourraient mieux reconnaître l'environnement et les objets individuels et les intégrer dans l'expérience, permettant ainsi des applications plus immersives et plus utiles.

Lors du récent Meta Connect, Meta a annoncé une nouvelle API qui permettra aux applications d'accéder à la caméra pour la première fois, bien qu'il ne soit pas encore clair jusqu'où ira cette autorisation. Attendez-vous à ce que Meta fasse preuve de prudence.

Un autre domaine dans lequel nous pouvons nous attendre à des progrès est bien sûr celui de la qualité passthrough. Il y a encore beaucoup à faire en termes de résolution, de correction de distorsion, de sensibilité à la lumière et de latence.

Comme vous pouvez le constater, la réalité mixte en est encore à ses balbutiements et il sera passionnant de voir comment la technologie se développera dans les années à venir.

Cordialement,

Tomislav

Intéressé par la réalité virtuelle et la réalité augmentée ? Alors suivez-nous sur Facebook ou X ou partagez votre expérience dans les commentaires. Pour des commentaires, suggestions de sujetsou d'autres idées, veuillez nous envoyer un e-mail à hello@mixed-news.com.