La société d'IA basée à New York, Runway, a récemment lancé un outil d'IA appelé Gen-2, capable de transformer de simples descriptions textuelles ou des images fixes en une courte vidéo. Par exemple, lorsque vous saisissez la phrase « un chat qui marche sous la pluie », une vidéo de trois secondes avec le contenu demandé sera produite par l'IA.
Runway est une célèbre startup d'IA née en 2018. Il s'agit d'une société d'IA célèbre tout autant qu'OpenAI et propose un site Web pour aider les utilisateurs à éditer rapidement des vidéos, par exemple en supprimant des polices ou en ajoutant des effets.
En février 2019, Runway a annoncé un modèle de montage vidéo appelé Gen-1, capable de convertir des séquences vidéo existantes, d'importer des animations 3D brutes ou d'ajouter des filtres générés par l'IA.
Gen-2 s'appuie sur l'architecture de Gen-1, mais se concentre davantage sur l'initialisation de vidéos avec des images d'entrée, du texte ou une combinaison des deux.
Le co-fondateur et PDG de Runway, Cris Valenzuela, a présenté la démo Gen-2 sur Twitter. En quelques secondes seulement, Gen-2 peut créer des images de « drone dans le ciel du désert » ou de « gros plan d'yeux humains », bien que la résolution et le réalisme soient encore limités et qu'il n'y ait pas de son.
En saisissant simplement du texte, a ajouté Valenzuela, vous pouvez créer une vidéo d'une poursuite en voiture passionnante, mais parfois ces voitures peuvent voler.
Plus l’entrée requise est détaillée, plus la vidéo produite par le Gen-2 est vive. Valenzuela a déclaré que Gen-2 sera amélioré pour aider les artistes, designers et cinéastes à créer des vidéos plus rapidement et à moindre coût.
La vidéo créée par Gen-2 a été considérée comme « super étonnante » par le professeur Hany Farid de l'Université de Californie. Mais il craint également que ce système d'IA puisse être utilisé par des méchants pour produire de fausses vidéos afin de diffuser de fausses nouvelles et des arnaques...
Gen-2 a actuellement un accès restreint. Pour en faire l’expérience, les utilisateurs doivent s’inscrire et attendre. Runway accordera un accès général aux utilisateurs dans les semaines à venir.