Meta révèle l’outil « WorldGen » pour générer des mondes VR à partir d’invites d’IA

Meta a annoncé WorldGen, un nouvel outil d’IA qui pourrait bientôt vous permettre de générer des mondes 3D navigables en quelques minutes à partir d’une seule invite de texte.

Les Nouvelles

Meta Reality Labs a annoncé WorldGen dans un article de blog, un système de recherche permettant de générer des mondes 3D entièrement navigables et stylistiquement cohérents à partir d’une seule invite de texte.

Comme indiqué dans le document de recherche de WorldGen, au lieu de produire un seul point de vue ou un petit environnement, le système basé sur l’IA crée de grandes scènes cohérentes jusqu’à 50 × 50 mètres que vous pouvez parcourir, explorer et charger directement dans des moteurs comme Unity ou Unreal Engine.

Le pipeline combine plusieurs composants : génération de mises en page procédurales, planification basée sur des images, reconstruction 3D basée sur la diffusion, extraction de navmesh, décomposition de scènes, raffinement de maillage et texturation, explique Meta.

De plus, Meta indique que WorldGen peut également décomposer les scènes en objets à l’aide d’un processus AutoPartGen accéléré, rendant les environnements plus réutilisables et modifiables.

Il n’est pas encore sorti, car Meta le dit, il existe plusieurs limites à une utilisation généralisée :

« Actuellement, WorldGen s’appuie sur la génération d’une vue de référence unique de la scène, ce qui limite l’échelle des scènes pouvant être produites », indique l’article de Reality Labs. « Les grands mondes ouverts s’étendant sur des kilomètres ne sont pas pris en charge de manière native et nécessiteraient de générer et d’assembler plusieurs régions locales, ce qui risque d’introduire des transitions non fluides ou des artefacts visuels aux limites des régions. »

D’autres limitations incluent l’incapacité de modéliser des environnements multicouches, comme des donjons à plusieurs étages ou des transitions intérieures-extérieures transparentes. Et contrairement aux environnements créés par l’homme, WorldGen ne réutilise pas les textures ou la géométrie, ce qui est souvent fait pour l’efficacité du rendu, ce que Meta dit explorer dans les versions futures pour favoriser l’évolutivité.

Mon avis

Mondes Horizon a besoin d’un contenu de haute qualité pour attirer et fidéliser les utilisateurs. Bien que je ne puisse pas dire que les mondes d’IA générés aléatoirement résoudront ce problème, faire une partie du gros travail de création de décors pourrait manifestement améliorer la base des mondes actuels.

Pour démarrer, la société a déjà publié une multitude de fonctionnalités d’IA pour les créateurs d’Horizon Worlds, y compris un copilote « Creator Assistant » alimenté par l’IA, ainsi que la génération de maillage et de texture 3D pilotée par l’IA, la création de code dactylographié, la génération du ciel et de l’audio pour les effets sonores et les environnements ambiants ; WorldGen regroupe ostensiblement un grand nombre de ces systèmes disparates dans une boîte de dialogue monolithique.

Certes, ce n’est pas encore sorti, même si ces premières étapes donnent un peu l’impression d’atteindre le point de départ de jeux entièrement générés par l’IA, et pas seulement de niveaux de 50 × 50 mètres. Quoi qu’il en soit, il semble Mondes Horizon espère un jour accueillir des mondes essentiellement ambiance développée dans l’existence.