Image : Gracia AI
L'article ne peut pas être activé avec JavaScript. Vous pouvez également activer JavaScript dans votre navigateur et sur la nouvelle page.
Les éclaboussures gaussiennes pourraient réaliser le rêve de photos et de vidéos volumétriques. Je l'ai essayé en utilisant l'exemple de Gracia avec Quest 3.
Capturer une scène dans le monde réel et la parcourir plus tard comme un environnement 3D avec un casque VR : les médias volumétriques sont un vieux rêve qui se rapproche un peu plus avec les éclaboussures gaussiennes.
L'éclaboussement gaussien est une technique de rendu basée sur l'apprentissage automatique qui utilise des photographies d'un lieu réel pour en créer une copie numérique. Contrairement à d'autres formats immersifs tels que les films à 180 degrés et les vidéos spatiales d'Apple, ces scènes 3D permettent des changements de perspective libres.
La startup Gracia AI a développé un pipeline censé rendre les splats gaussiens 10 fois plus rapides que les autres solutions du marché, leur permettant d'être affichés sur des casques autonomes comme Meta Quest 3. Leur vision est que leur plateforme Gracia devienne un YouTube pour les volumétries. contenu, où les splats gaussiens peuvent être facilement téléchargés, partagés et visualisés.
Gracia est disponible sur Steam pour les casques PC VR et sur Sidequest pour Quest 3. J'ai essayé cette dernière version pour découvrir à quoi ressemblent les splats gaussiens en VR.
Splats gaussiens sur la quête 3 : ce n'est que le début
Après avoir téléchargé le programme sur Quest et l'avoir démarré, une fenêtre avec le site Web de Gracia s'ouvrira. Vous devrez créer un compte et je vous recommande de le faire sur un ordinateur plutôt qu'en VR. Vous pouvez ensuite parcourir une galerie de scènes volumétriques, les télécharger sur le casque Quest et les visualiser dans un environnement immersif.
La sélection de contenu est actuellement très limitée. Au moins pour Quest 3, il n'y a qu'une poignée d'images disponibles : une performance artistique cyberpunk appelée Embyro of the Future et une série de scènes de tous les jours. Seuls ceux qui utilisent Gracia sur PC auront accès à tout le contenu de la plateforme, y compris les Gaussian Splats qu'ils ont eux-mêmes téléchargés. Ceux-ci devront apparemment d’abord être optimisés pour fonctionner sur Quest 3.
La résolution des scènes disponibles est assez faible, et on peut parfois voir des artefacts et un rendu à mise au point fixe. Quest 3 est apparemment déjà à sa limite avec ça.
Gracia donne un premier aperçu des possibilités de la technologie, et il est impressionnant que les splats soient rendus de manière fluide sur le casque. Mais vous pouvez également constater que la technologie en est encore à ses balbutiements.
Si les splats gaussiens personnalisés et la plupart des autres contenus sont réservés au PC VR, la plateforme restera probablement une niche. Gracia on Quest est une démo technique intéressante, mais pas (encore) quelque chose qui motivera les utilisateurs normaux à utiliser un Quest 3.
Gracia : premières images fixes, vidéos ultérieures
Il est assez facile de créer vos propres splats de nos jours. Tout ce dont vous avez besoin est un smartphone moderne et une application comme Polycam, Luma ou Scaniverse. J'ai téléchargé un splat fait maison sur Gracia, mais je n'ai pas pu le regarder avec Quest 3. J'ai besoin d'un PC pour cela – ce qui, franchement, n'en vaut pas la peine pour moi.
Gracia AI a levé 1,2 million de dollars lors de sa première ronde de financement et prévoit de soutenir la vidéo volumétrique à l'avenir. À terme, dit la startup, vous devriez pouvoir entrer sur une scène de concert ou sur un ring de l'UFC. Mais c’est encore loin.
Vous pouvez télécharger Gracia sur Steam pour les casques PC VR et sur Sidequest pour Quest 3. Une version pour Vision Pro est également en développement.