Als je van een gewone video een slow motion-video wilt maken, moet de software de video uitrekken door veel niet-bestaande frames tussen de beschikbare frames toe te voegen. Maar de resultaten zijn nog steeds niet zoals verwacht, de video zal schokkerig en niet echt zijn.
Nvidia heeft echter geprofiteerd van de beeldverwerkingsmogelijkheden van deep learning-technologie voor kunstmatige intelligentie om extreem vloeiende slow motion-video te creëren, alsof u met een professionele camera een gewone video maakt.
Om een gewone video van 30 fps om te zetten in een slow motion-video van 240 fps, zijn er 210 extra frames of 7 nieuwe frames nodig tussen de twee oorspronkelijk opgenomen frames. Voorheen was de gebruikte methode het overvloeien of transformeren van een paar frames voor en na elk echt frame, maar dit was nog steeds niet voldoende om een vloeiende slow-motionvideo te creëren. Daarom zien we vrijwel alleen slow motion-video's in films verschijnen, maar zeer zelden in sport.
De AI van NVIDIA verandert gewone video's in slow-motionvideo's.
Momenteel is er ook een aantal geavanceerde emulatiesoftware, zoals Twixtor's RE:Vision Effect, die vloeiende slow-motionvideo's kan maken, maar complexe bewegingsanalyse in de clip vereist en veel tijd kost.
Nvidia gebruikte 11.000 slow motion-video's van standaard sportinhoud, opgenomen met 240 fps native, om een deep learning AI aan te leren, zodat deze de 210 frames voor en na elk frame kan voorspellen.

Momenteel kunnen veel geavanceerde smartphones of camera's slow motion-video's opnemen tot 240 fps, maar de resolutie is verlaagd. De methode van Nvidia is een veel goedkoper alternatief voor de tienduizenden dollars die worden uitgegeven aan camera's als de Phantom. Maar vergeleken met geavanceerde camera's heeft de AI van Nividea nog steeds tijd nodig om video te verwerken, omdat alle slow-motion videocreatie plaatsvindt nadat de video is opgenomen.
Bekijk meer: