La última tecnología de IA de Nvidia transforma palabras en imágenes realistas
En contexto: la tecnología GauGAN de Nvidia ya ha demostrado de lo que es capaz, convirtiendo bocetos simples en imágenes fotorrealistas. Desde entonces, vimos que se empleó en Nvidia Canvas, pero parece que el gigante de la GPU apunta a terrenos más altos con su IA, lanzando una nueva versión capaz de convertir palabras en imágenes.
Nvidia mostró su tecnología GauGAN por primera vez en 2019, pero solo recientemente vimos que se presentó en un producto disponible para el público en general. Llamado Canvas, esta pieza de software puede ser muy divertida de usar, ya que permite a los usuarios crear increíbles imágenes similares a fotografías con bocetos básicos.
Han pasado algunos meses desde el anuncio de Canvas, pero el trabajo en GauGAN ha continuado y ahora está llegando a la versión 2.0. La tecnología se ha vuelto aún más impresionante, ya que ahora es capaz de convertir palabras en imágenes fotorrealistas, brindando un resultado similar al que obtenemos al usar la función de dibujo a imagen.
Como se ve en el video de arriba, escriba algo en el cuadro de texto e inmediatamente se generará una imagen basada en sus palabras. Agregue un adjetivo o reemplace un sustantivo en la frase y la imagen cambiará en consecuencia.
Para mayor personalización, los usuarios pueden combinar funciones de texto y dibujo a imagen. Usando palabras escritas para generar la base y dibujos para detallar la imagen, puede cambiar la forma, el tamaño y las texturas de cualquier objeto dentro de la imagen.
Para lograr estos resultados, la función de conversión de texto a imagen GauGAN 2 de Nvidia utiliza un modelo de IA basado en una red antagónica generativa que "combina el mapeo de segmentación, la pintura interna y la generación de texto a imagen". Este modelo se entrenó con 10 millones de imágenes de paisajes, por lo que debe estar bien preparado para cualquier cosa que le eches (o no).
Puede probarlo usando la demostración interactiva de AI de Nvidia para GauGAN 2 usando su navegador web. Para jugar con él, primero deberá aceptar los términos y condiciones de Nvidia (marque la casilla en la parte inferior de la página).