Nvidia förvandlar verklig värld till en virtuell värld genom AI

Nvidia använde AI för att skapa en spelmiljö från verkliga bilder

Nvidia-logotyp

Att bygga en 3D-miljö i realtid ansågs vara en hård nöt att knäcka men Nvidia har gjort det. Chipsdesignern har tagit hjälp av Artificial Intelligence (AI) för att skapa en 3D-spelmiljö från bilder och videor som tagits i verkligheten. Nvidia meddelade idag att utvecklare nu kan återge till 3D-miljön med hjälp av verkliga videor.

Det nya AI-systemet som presenterades av Nvidia visade att olika element på gatorna kan kännas igen. Element som parkerade bilar, byggnader och trottoarer modellerades alla med hjälp av AI. Saker som visas i en realtidsvideo kan sedan återges till 3D-designen. De kan sedan användas i spel som urban racing körspel. I stället för att skapa en ny design kan en renderingsversion av en stadsstad göras med AI-systemet.

Forskare från Nvidia använde neural teknik för att skapa 3D-miljön i den verkliga världen. Denna teknik kan visa sig vara billigare och mindre tidskrävande jämfört med den nuvarande 3D-renderingen. Just nu måste företagen modellera varje objekt individuellt i den virtuella världen. Det är därför som Nvidias teknik är ett stort genombrott eftersom den kan skapa en 3D-modell från realtidsvideo eller foton.

Vice president för Nvidias Applied Deep Learning Research Center Bryan Catanzaro sa att det är första gången de lyckats skapa interaktiv grafik med hjälp av det neurala nätverket. Bryan tror att neurala nätverk kommer att förändra hur grafik skapas. Genom tekniken kommer utvecklare att kunna skapa nya scener till en låg kostnad.

För renderingen av 3D-grafik samlade forskarna först data från en öppen källkodsdata. Datauppsättningen, i det här fallet, var videofilmen som delades upp i olika ramar som byggnader, träd och andra. Catanzaro förklarade att världens struktur skapas traditionellt med AI som genererar grafik för den.