Najnowsza technologia sztucznej inteligencji firmy Nvidia przekształca słowa w realistyczne obrazy
W kontekście: technologia GauGAN firmy Nvidia już pokazała, do czego jest zdolna, zamieniając proste szkice w fotorealistyczne obrazy. Od tego czasu widzieliśmy, że jest on używany w Nvidia Canvas, ale wydaje się, że gigant GPU celuje w wyższy poziom dzięki swojej sztucznej inteligencji, wprowadzając nową wersję zdolną do przekształcania słów w obrazy.
Nvidia po raz pierwszy pokazała swoją technologię GauGAN w 2019 roku, ale dopiero niedawno zobaczyliśmy ją w produkcie dostępnym dla ogółu społeczeństwa. Nazwany Canvas, to oprogramowanie może być bardzo przyjemne w użyciu, umożliwiając użytkownikom tworzenie niesamowitych zdjęć przypominających zdjęcia z podstawowymi szkicami.
Od zapowiedzi Canvas minęło kilka miesięcy, ale prace nad GauGANem trwają i teraz trafia do wersji 2.0. Technologia stała się jeszcze bardziej imponująca, ponieważ jest teraz w stanie zamienić słowa w fotorealistyczne obrazy, zapewniając podobny rezultat do tego, który uzyskujemy dzięki funkcji rysowania na obrazie.
Jak widać na powyższym filmie, napisz coś w polu tekstowym, a obraz zostanie natychmiast wygenerowany na podstawie Twoich słów. Dodaj przymiotnik lub zamień rzeczownik w zdaniu, a obraz odpowiednio się zmieni.
W celu dodatkowej personalizacji użytkownicy mogą łączyć funkcje tekstu i rysowania na obrazie. Używając słów pisanych do generowania podstawy i rysunków do uszczegóławiania obrazu, możesz zmienić kształt, rozmiar i teksturę dowolnego obiektu na obrazie.
Aby osiągnąć te wyniki, funkcja konwersji tekstu na obraz GauGAN 2 firmy Nvidia wykorzystuje generatywny model AI oparty na sieci przeciwstawnej, który „łączy mapowanie segmentacji, malowanie i generowanie tekstu na obraz". Ten model został wytrenowany przy użyciu 10 milionów obrazów krajobrazów, więc powinien być dobrze przygotowany na wszystko, co w niego rzucisz (lub nie).
Możesz spróbować, korzystając z interaktywnego demo Nvidii AI dla GauGAN 2 za pomocą przeglądarki internetowej. Aby się nim bawić, musisz najpierw zaakceptować warunki Nvidii (zaznacz pole na dole strony).