GauGAN2 by NVIDIA

Il combine plusieurs modalités telles que le texte, la segmentation sémantique, le croquis et le style au sein d'un cadre GAN unique. Cela permet de transformer la vision d'un artiste en une image générée par l'IA de haute qualité.

Avec GauGAN2, les utilisateurs peuvent saisir une courte phrase pour générer rapidement les caractéristiques et le thème clés d'une image. NVIDIA donne l'exemple d'une chaîne de montagnes enneigées, qui peut ensuite être personnalisée avec des croquis pour rendre une montagne spécifique plus haute, ajouter quelques arbres ou ajouter d'autres personnalisations au premier plan, ou des nuages dans le ciel.

GAUGAN 2 en est à ses débuts de développement à ce stade et a probablement été formé uniquement sur un ensemble de données assez limité. Quoi qu'il en soit, lorsqu'il fonctionne, il offre un aperçu époustouflant de la façon dont la technologie de l'IA pourrait transformer la création d'actifs dans les films et les jeux dans les années à venir, avec des paysages et des objets photoréalistes uniques générés à partir de quelques mots saisis par l'utilisateur.

Sources :
https://analyticsindiamag.com/nvidias-gaugan2-vs-openais-glide/https://www.notebookcheck.net/NVIDIA-s-AI-based-GAUGAN-2-tool-generates-Van-Goghesque-landscapes-from-words-and-phrases-you-input.581454.0.html
Clause de non-responsabilité : GauGAN2 n'utilise pas GPT-3