Bientôt, des avatars VR réalistes pourraient être générés par des descriptions textuelles. Une vidéo montre comment cela fonctionne. Nous explorons également des considérations supplémentaires.
Une nouvelle méthode permet de créer automatiquement avatars dans des environnements VR simplement en les décrivant. Une vidéo du projet Text-to-VR de SpecialguestX, Meta Cs Labs, Brian Fox et 1stAveMachine montre comment un avatar prend vie en décrivant des mouvements et des actions dans une interface textuelle.
Le processus utilise une combinaison d’intelligence artificielle et de modélisation 3D pour générer des avatars en temps réel. Une simple description textuelle telle que « Un homme marche vers la caméra et fait un signe de la main » crée un avatar réaliste qui se déplace selon les commandes.
Concevoir la réalité virtuelle avec saisie de texte
Les développeurs ont reconnu le potentiel du text-to-VR et travaillent à l’utiliser en conjonction avec d’autres modèles d’IA pour créer scènes complètes dans des environnements VR. Cette idée n’est cependant pas entièrement nouvelle. Un développeur a déjà créé un monde VR à l’aide du générateur d’images AI Stable Diffusion.
L’objectif de ce projet est d’améliorer la recherche en sciences sociales par des expériences immersives. Le text-to-VR pourrait également être utilisé dans d’autres domaines, comme l’industrie du jeu vidéo, pour automatiser et accélérer la création de personnages et d’environnements.
Implications pour le développement VR assisté par l’IA
La possibilité de créer des mouvements et des actions complexes en utilisant uniquement des descriptions textuelles permettrait aux non-professionnels sans aucune connaissance préalable de la modélisation 3D de donner vie à leurs idées en réalité virtuelle. Cependant, la technologie a également implications éthiques et sociales. Par exemple, cela faciliterait la génération d’avatars à des fins politiques ou commerciales susceptibles de violer les droits à la vie privée de personnes réelles.
Pourtant, le text-to-VR est une vision passionnante dans le développement de la VR. Ce ne sera peut-être pas long avant de faire de notre propre imagination une réalité dans la réalité virtuelle.