A mais recente tecnologia de IA da Nvidia transforma palavras em imagens realistas
No contexto: a tecnologia GauGAN da Nvidia já mostrou do que é capaz, transformando simples esboços em imagens fotorrealistas. Desde então, vimos ele sendo empregado no Nvidia Canvas, mas parece que o gigante da GPU está mirando em terrenos mais altos com sua IA, lançando uma nova versão capaz de transformar palavras em imagens.
A Nvidia mostrou sua tecnologia GauGAN pela primeira vez em 2019, mas apenas recentemente vimos ela sendo apresentada em um produto disponível para o público em geral. Chamado Canvas, este software pode ser muito divertido de usar, permitindo que os usuários criem imagens incríveis semelhantes a fotos com esboços básicos.
Alguns meses se passaram desde o anúncio do Canvas, mas o trabalho no GauGAN continuou e agora está chegando à versão 2.0. A tecnologia ficou ainda mais impressionante, pois agora é capaz de transformar palavras em imagens fotorrealistas, proporcionando um resultado semelhante ao que obtemos ao usar o recurso desenhar para imagem.
Como visto no vídeo acima, escreva algo na caixa de texto e uma imagem será gerada imediatamente com base em suas palavras. Adicione um adjetivo ou substitua um substantivo na frase e a imagem mudará de acordo.
Para personalização adicional, os usuários podem combinar recursos de texto e desenho para imagem. Usando palavras escritas para gerar a base e desenhos para detalhar a imagem, você pode alterar a forma, tamanho e texturas de qualquer objeto dentro da imagem.
Para alcançar esses resultados, o recurso de texto para imagem GauGAN 2 da Nvidia usa um modelo generativo de IA baseado em rede adversária que "combina mapeamento de segmentação, pintura interna e geração de texto para imagem". Este modelo foi treinado usando 10 milhões de imagens de paisagem, por isso deve estar bem preparado para o que quer que você jogue nele (ou não).
Você pode experimentá-lo usando a demonstração interativa de IA da Nvidia para GauGAN 2 usando seu navegador da web. Para jogar com ele, você terá que primeiro concordar com os termos e condições da Nvidia (marque a caixa na parte inferior da página).