L’IA transforme le classique de Chaplin en un film 3D – et vous pouvez le regarder avec votre Meta Quest

Image : MIXTE

Une startup basée à Londres utilise l’IA pour ajouter de la profondeur aux films 2D. Avec Meta Quest 2, vous pouvez regarder un film classique entièrement converti.

Joff Summerfield et Jesse Seaward ont développé une méthode pour convertir des films 2D en films 3D à l’aide de l’IA. Ils montrent maintenant à quoi cela ressemble en utilisant le classique du film muet de 1917 de Charlie Chaplin « The Immigrant ».

Si vous possédez un Meta Quest 2, vous pouvez regarder le film en 3D sur Youtube. Je l’ai essayé et j’ai trouvé l’effet impressionnant. Surtout quand on se rend compte que les images ont plus de cent ans. La conversion 3D est presque impeccable.

« Nous pensons que l’expérience de regarder Charlie Chaplin de près et personnellement place le spectateur dans un monde différent de celui de le regarder à la télévision à la maison », déclare Jesse Seaward, co-fondateur de la startup. Reallife3D.

Conversions 3D avec IA : presque automatisées

Un « cocktail unique de processus basés sur l’intelligence artificielle » a été utilisé dans la conversion 3D, selon Seaward. Avec la conversion 3D, le duo veut montrer comment l’intelligence artificielle peut aider à améliorer et moderniser les vieux films. Mais les images modernes peuvent également bénéficier du processus, ajoutant de la valeur dans le contexte métaverse.

Seaward dit que « presque tous les processus » sont automatisés. Le travail humain, dit-il, consiste à relayer les fichiers et à choisir les bons processus, qui dépendent de la nature du matériel source. La conversion 3D complète du film de 24 minutes a pris environ Dix joursdit-il, le traitement en représentant la majeure partie.

L’équipe recherche actuellement les partenaires qui veulent que leur contenu soit converti. Aussi et surtout pour la VR.

« Convertir une vidéo comme celle-ci prend tellement plus de temps et d’argent que les méthodes traditionnelles, cela ouvre la porte à différents marchés et créateurs de contenu », déclare Seaward. « Nous espérons que cela encouragera davantage de personnes à mettre davantage de contenu sur des plates-formes immersives, nous travaillons donc toujours sur le processus pour améliorer la précision et l’efficacité afin de le rendre finalement plus viable et accessible. »

Des images uniques à la vidéo

J’avais écrit sur RealLife3D fin 2021 après être tombé sur leur chaîne YouTube. À l’époque, le duo convertit de vieilles photographies en images stéréoscopiques et les enrichit de paysages sonores et de musique. Le résultat : de fascinants voyages dans le temps en 3D. Maintenant, ils vont encore plus loin avec la conversion vidéo 3D automatisée.

« Depuis 2021, nous travaillons à passer du traitement d’images uniques à des multiples où il est devenu viable de convertir la vidéo. Il y a d’énormes obstacles à franchir lorsque l’on passe d’une seule image 3D visualisée une par une à des milliers qui doivent correspondre parfaitement, même si le principe de base est le même », déclare Seaward.

Le film Chaplin est actuellement disponible sur la chaîne YouTube de Reallife3D et peut être visionné en 3D grâce à YouTube VR et Meta Quest 2. Le duo réfléchit à utiliser de nouveaux canaux de distribution tels que Meta Quest TV à l’avenir.

Plus d’informations sur Reallife3D peuvent être trouvées sur le site officiel.