Nvidia hat erfolgreich ein KI-System entwickelt, das aus 2D-Bildern 3D-Modelle erstellen kann

Was wäre, wenn wir eine 3D-Spielwelt entwickeln könnten, indem wir einfach Fotos verwenden, die wir mit einem Kompakttelefon aufgenommen haben? Forscher für künstliche Intelligenz von Nvidia haben kürzlich erfolgreich ein KI-System entwickelt, das in der Lage ist, aus jedem 2D-Bild vollständige 3D-Modelle vorherzusagen und zu erstellen.

Dieses KI-System heißt „DIB-R“. Der herausragendste Vorteil ist die Fähigkeit, 2D-Bilder von jedem Objekt aufzunehmen und dann den Zustand des Objekts im dreidimensionalen Raum vorherzusagen, einschließlich einiger grundlegender Elemente wie Licht, Textur usw Tiefe.

Einfach ausgedrückt kann DIB-R das, was es sieht (2D-Bilder), kombinieren und auf der Grundlage seines Verständnisses der 3D-Welt, in der es trainiert wurde, Rückschlüsse ziehen. Dies ähnelt sehr der Art und Weise, wie Menschen 2D-Bilder mit bloßem Auge wahrnehmen und sich im Kopf ein 3D-Modell dieses Bildes vorstellen.

„Stellen Sie sich vor, Sie könnten in den lebendigen Raum eines Fotos eintreten, das Sie gerade aufgenommen haben, oder sogar in den vergangenen Raum alter Fotos zurückkehren, hineingehen und alles aus jedem Blickwinkel betrachten. Verschiedene Grade... alles wird werden „Mit Hilfe von KI-Modellen wie DIB-R Realität werden zu lassen“, sagte Sanja Fidler, Nvidias KI- Direktorin und Leiterin der DIB-R-Forschung, in einer Telefonkonferenz. Interview.

In naher Zukunft hoffen die Nvidia-Ingenieure, DIB-R um Funktionen erweitern zu können, die dieses KI-Modell im Wesentlichen in eine Deep-Virtual-Reality-Rendering-Engine verwandeln könnten. Ein solches System wäre in der Lage, aus Fotos in überraschend schneller Zeit von weniger als einer Sekunde eine vollständige, lebendige 3D-Welt zu erstellen.

Die Möglichkeit, 3D-Raum aus Fotos zu rendern, eröffnet Content-Entwicklern ein großes kreatives Potenzial und macht Technologien wie Google Maps attraktiver denn je. In Zukunft kann sogar ein Fotograf zum Ersteller von 3D-Inhalten werden, ohne eine einzige Zeile Code schreiben zu müssen, denn die schwierigsten Aufgaben werden von Maschinen erledigt. Wir werden keine komplexen mechanischen Systeme und Tausende von Programmieringenieuren mehr brauchen, um ein großes Open-World-Spiel wie Skyrim und Grand Theft Auto zu entwickeln , alles wird sauber von der KI gehandhabt.