L’ultima tecnologia AI di Nvidia trasforma le parole in immagini realistiche
Nel contesto: la tecnologia GauGAN di Nvidia ha già mostrato di cosa è capace, trasformando semplici schizzi in immagini fotorealistiche. Da allora l'abbiamo visto essere impiegato in Nvidia Canvas, ma sembra che il colosso delle GPU punti a livelli più alti con la sua IA, lanciando una nuova versione in grado di trasformare le parole in immagini.
Nvidia ha mostrato per la prima volta la sua tecnologia GauGAN nel 2019, ma solo di recente l'abbiamo vista essere presente in un prodotto disponibile per il grande pubblico. Chiamato Canvas, questo software può essere molto divertente da usare, consentendo agli utenti di creare incredibili immagini simili a foto con schizzi di base.
Sono passati alcuni mesi dall'annuncio di Canvas, ma il lavoro su GauGAN è continuato e ora sta raggiungendo la versione 2.0. La tecnologia è diventata ancora più impressionante, poiché ora è in grado di trasformare le parole in immagini fotorealistiche, fornendo un risultato simile a quello che otteniamo utilizzando la funzione di disegno sull'immagine.
Come visto nel video sopra, scrivi qualcosa nella casella di testo e verrà generata immediatamente un'immagine basata sulle tue parole. Aggiungi un aggettivo o sostituisci un sostantivo nella frase e l'immagine cambierà di conseguenza.
Per una maggiore personalizzazione, gli utenti possono combinare testo e funzionalità di disegno su immagine. Usando parole scritte per generare la base e disegni per dettagliare l'immagine, puoi modificare la forma, le dimensioni e le trame di qualsiasi oggetto all'interno dell'immagine.
Per ottenere questi risultati, la funzione di conversione da testo a immagine GauGAN 2 di Nvidia utilizza un modello di intelligenza artificiale basato su rete contraddittorio generativo che "combina mappatura della segmentazione, pittura e generazione da testo a immagine". Questo modello è stato addestrato utilizzando 10 milioni di immagini di paesaggi, quindi dovrebbe essere ben preparato per qualunque cosa gli venga lanciata (o meno).
Puoi provarlo utilizzando la demo interattiva AI di Nvidia per GauGAN 2 utilizzando il tuo browser web. Per giocarci, dovrai prima accettare i termini e le condizioni di Nvidia (seleziona la casella in fondo alla pagina).