Des chercheurs de l'Institut américain Allen pour l'intelligence artificielle ont créé une nouvelle IA2 capable de générer des photos avec un texte descriptif. Cette IA a été créée sur la base d'un modèle de vision par ordinateur qui annote ce qu'elle « voit » sur une photo mais inverse l'algorithme pour créer une image à partir de la description. Même si les images créées par l’IA sont un peu « effrayantes », elles constituent une nouvelle avancée dans l’Intelligence Artificielle.
Selon le MIT Technology Review, générer des images à partir de descriptions est un domaine de recherche passionnant. Décrire une photo sous forme de texte est assez facile, même pour les enfants, mais l’inverse n’est pas simple.

L'image d'un "zèbre marchant sur la route tandis que deux voitures passent à toute allure" a été créée par AI2.
Les chercheurs de l'Allen Institute ont créé un modèle d'annotation d'image nommé Lxmert, puis l'ont mis à niveau vers X-Lxmert. Bien que ce qui est montré sur la photo ne soit pas décrit de manière précise et « cohérente » par Lxmert, le contenu de la photo n’est pas complètement « dénué de sens ».
Les chercheurs ont ensuite demandé à l’IA de former une photo à partir de ces descriptions. Même si presque aucune des photos n’a été réalisée, les résultats ont impressionné les chercheurs. Cette IA n'aboutit pas à un produit parfait pour certains mots-clés, comme « photographe », « studio photo » ou « appareil photo », mais elle constitue tout de même une avancée incroyable dans le domaine de l'intelligence artificielle, montrant que les lacunes laissées par l'industrie de l'IA sera "rempli" à l'avenir.
Image inachevée de la « caméra sur la table » d'AI2.
En outre, cette orientation peut ouvrir la voie à l’énorme potentiel de l’IA lorsqu’elle est utilisée dans les industries du cinéma et de la peinture.