Nvidia a développé avec succès un système dIA capable de créer des modèles 3D à partir dimages 2D

Et si nous pouvions développer un monde de jeu en 3D simplement à partir de photos prises à partir d’un téléphone compact ? Les chercheurs en intelligence artificielle de Nvidia ont récemment développé avec succès un système d'IA capable de prédire et de créer des modèles 3D complets à partir de n'importe quelle image 2D.

Ce système d'IA s'appelle "DIB-R", son avantage le plus remarquable étant la possibilité de prendre des images 2D de n'importe quel objet, puis de prédire l'état de l'objet dans un espace tridimensionnel, y compris certains éléments de base comme la lumière, la texture et profondeur.

En termes simples, DIB-R peut combiner ce qu'il voit (images 2D) et faire des inférences basées sur sa compréhension du monde 3D dans lequel il a été formé. Ceci est très similaire à la façon dont les humains perçoivent les images 2D à l’œil nu et imaginent un modèle 3D de cette image dans leur esprit.

"Imaginez pouvoir entrer dans l'espace vivant d'une photo que vous venez de prendre, ou même revenir dans l'espace passé de vieilles photos, entrer à l'intérieur et pouvoir tout observer sous tous les angles. Différents degrés... tout deviendra réalité avec l'aide de modèles d'IA comme DIB-R", a déclaré Sanja Fidler, directrice de l'IA de Nvidia et responsable de la recherche DIB-R, lors d'une conférence téléphonique. interview.

Dans un avenir proche, les ingénieurs de Nvidia espèrent ajouter des fonctionnalités à DIB-R qui pourraient essentiellement transformer ce modèle d'IA en un moteur de rendu de réalité virtuelle approfondi. Un tel système serait capable de créer un monde 3D complet et dynamique à partir de photos, en un temps étonnamment rapide de moins d'une seconde.

La possibilité de restituer un espace 3D à partir de photos ouvre un grand potentiel créatif aux développeurs de contenu et rend les technologies telles que Google Maps plus attrayantes que jamais. À l’avenir, même un photographe pourra devenir créateur de contenu 3D sans avoir à écrire une seule ligne de code, car les tâches les plus difficiles seront prises en charge par des machines. Nous n'aurons plus besoin de systèmes mécaniques complexes et de milliers d'ingénieurs en programmation pour créer un grand jeu en monde ouvert comme Skyrim et Grand Theft Auto , tout sera parfaitement géré par l'IA.