GauGAN2 er et verktøy for å lage AI-genererte fotorealistiske landskap. Utviklet av NVIDIA og tilgjengelig som en webdemo, lar GauGAN2 deg justere bildet så mye du vil, ved å bruke en blanding av skisser og tekstinndata for å veilede AI-systemet.
Med litt tid kan du avgrense bildet ved å legge til eller ta bort detaljer til det er helt riktig. Bildene den kan produsere ser ofte realistiske ut, men ett feil slag og bildene kan begynne å se ut som fantasy-kunstverk, i stedet for virkelige landskap.
Her er det du trenger å vite om NVIDIAs GauGAN2.
Hva er NVIDIAs GauGAN2?
GauGAN2 er en kunstig kunstgenerator med et unikt redigeringsvindu. Utviklet av forskningsarmen til NVIDIA, det samme selskapet som lager GPU-er, er det tilgjengelig for alle å bruke via en webdemo.
Det ligner på en måte bruker Dall-E 2, en AI tekst-til-bilde-generator, der du kan skrive setninger som "solen går ned over ørkenen", og AI-systemet vil lage et bilde basert på den beskrivelsen. Det er imidlertid ikke alt du kan gjøre med GauGAN2; det er flere måter du kan fortsette å redigere bildet på.
Et alternativ er å bruke segmenteringskartet for å se en kontur av objekter i bildet. Ved å bruke denne informasjonen kan du endre formen på ting som en fjellkjede ved å tegne om grensene eller slette elementer helt.
Du kan også bruke blyantverktøyet til å tegne en sirkel, for eksempel, som kan gjengis som en sol. Det samme gjelder for å tegne noen få topper i bakgrunnen, som kan bli en fjellkjede, spesielt hvis du kombinerer det med tekstinndata som beskriver scenen.
Etter å ha prøvd NVIDIAs GauGAN2, vil du kanskje lære hvordan du bruker NVIDIAs Canvas-app, som er bygget på samme teknologi. Det er en gratis app rettet mot artister og kreative, men den fungerer bare med en av NVIDIAs RTX GPUer.
Hvordan fungerer GauGAN2?
Bak kulissene ble GauGAN2 bygget ved hjelp av generative adversarial networks (GAN). Faktisk er navnet et skuespill på den franske postimpresjonistiske artisten Paul Gauguin og GANs.
Grunnen til at den kan generere bilder som på overbevisende måte ser ut som ekte landskap, er at den i løpet av treningsperioden ble matet med 10 millioner høykvalitets landskapsbilder. Datakraften som kreves for å trene modellen kom fra NVIDIA Selene-superdatamaskinen, en av verdens kraftigste superdatamaskiner.
GAN-er finner bruk i mange applikasjoner, inkludert mange AI tekst-til-kunst-generatorer. Hovedforskjellen med GauGAN2 er muligheten til å endre det AI-genererte bildet i en dedikert editor, ved å bruke verktøy som penn, fyll og pensel for å gjøre endringer.
Grensesnittet er minimalt, men ikke akkurat brukervennlig, og retro-utseendet kan minne deg om de tidlige dagene med Microsoft-maling, i motsetning til banebrytende programvare. Hvis kontrollene ikke virker åpenbare med det første, kan du kjøre en rask opplæring eller se en videogjennomgang; bare klikk på knappene øverst til høyre på siden.
Hvilken kunst kan GauGAN2 produsere?
Målet med GauGAN2 er å lage fotorealistiske bilder av landskap som fjell, innsjøer og strender.
Det er et bibliotek med etiketter du kan velge mellom når du skisserer som hjelper deg med å merke skisseinngangen ytterligere, slik at AI-generatoren kan gjengi et bilde som er passende. Disse inkluderer ting som tåke, bakke, stein, snø og vann, for å nevne noen.
Det er imidlertid ikke vanskelig for ting å gå galt, og du er like sannsynlig å produsere absurde og surrealistiske bilder. Bare ta blyantverktøyet og tegn noen rare former, og GauGAN vil spytte ut noe som ser mer ut som et eksperimentelt kunstverk enn noe gjenkjennelig.
Å legge inn nonsensfraser i tekstboksen kan også gi merkelige utdata. Noen ganger trenger du ikke engang gå så langt; bare å be om et fjellandskap ga noe som ser ut som en merkelig kombinasjon av snø og pels.
I begge tilfeller kan noen artister finne et verktøy som dette nyttig. Det kan brukes til å fremskynde prosessen med storyboarding eller som en rask måte å lage konseptkunst for et spill eller en video.
Selv om denne demoen er langt unna å være et polert produkt klar til bruk, viser den et interessant potensial.
GauGAN2: En hybrid AI Art Generator
GauGAN2 slutter seg til samlingen av AI-bildegeneratorer som gjør tekst til bilder. I motsetning til andre applikasjoner kan du imidlertid redigere bildet i etapper, bruke skisser og tekst som input, finjustere AI-bildet slik du vil.
Hvis den brukes riktig, kan GauGAN2 produsere ganske overbevisende fotorealistiske bilder av naturen, som kan være nyttige for kunstnere som trenger å fylle ut et storyboard eller raskt produsere konseptkunst. Det er imidlertid altfor lett at ting blir bisarre, og noen få pennestrøk kan føre til interessante resultater.
