GauGAN2 é uma ferramenta para criar paisagens fotorrealistas geradas por IA. Desenvolvido pela NVIDIA e disponível como uma demonstração na web, o GauGAN2 permite que você ajuste a imagem o quanto quiser, usando uma mistura de esboços e entrada de texto para guiar o sistema de IA.
Com um pouco de tempo, você pode refinar a imagem adicionando ou removendo detalhes até que fique perfeito. As imagens que ele pode produzir muitas vezes parecem realistas, mas um toque errado e as imagens podem começar a parecer obras de arte de fantasia, em vez de paisagens da vida real.
Aqui está o que você precisa saber sobre o GauGAN2 da NVIDIA.
O que é o GauGAN2 da NVIDIA?
GauGAN2 é um gerador de arte AI com uma janela de edição exclusiva. Desenvolvido pelo braço de pesquisa da NVIDIA, a mesma empresa que fabrica GPUs, está disponível para qualquer pessoa usar por meio de uma demonstração na web.
É semelhante de certa forma usando Dall-E 2, um gerador de texto para imagem AI, onde você pode digitar frases como "sol se pondo no deserto" e o sistema AI criará uma imagem com base nessa descrição. No entanto, isso não é tudo que você pode fazer com o GauGAN2; existem várias maneiras de continuar editando a imagem.
Uma opção é usar o mapa de segmentação para ver um contorno dos objetos na imagem. Usando essas informações, você pode alterar a forma de coisas como uma cadeia de montanhas redesenhando seus limites ou apagando elementos completamente.
Você também pode usar a ferramenta lápis para desenhar um círculo, por exemplo, que pode ser renderizado como um sol. O mesmo vale para desenhar alguns picos no fundo, que podem se tornar uma cordilheira, especialmente se você combiná-lo com a entrada de texto descrevendo a cena.
Depois de experimentar o GauGAN2 da NVIDIA, você pode querer aprender como usar o aplicativo Canvas da NVIDIA, que é construído com a mesma tecnologia. É um aplicativo gratuito voltado para artistas e criativos, no entanto, só funciona usando uma das GPUs RTX da NVIDIA.
Como o GauGAN2 funciona?
Nos bastidores, o GauGAN2 foi construído usando redes adversárias generativas (GAN). Na verdade, seu nome é uma brincadeira com o artista pós-impressionista francês Paul Gauguin e os GANs.
A razão pela qual ele pode gerar imagens que parecem paisagens reais de forma convincente é que, durante o período de treinamento, foram alimentadas 10 milhões de imagens de paisagens de alta qualidade. O poder de computação necessário para treinar o modelo veio do supercomputador NVIDIA Selene, um dos supercomputadores mais poderosos do mundo.
GANs estão encontrando uso em muitos aplicativos, incluindo muitos Geradores de conversão de texto em arte de IA. A principal diferença com o GauGAN2 é a capacidade de alterar a imagem gerada por IA em um editor dedicado, usando ferramentas como caneta, preenchimento e pincel para fazer alterações.
A interface é mínima, mas não exatamente amigável, e sua aparência retrô pode lembrá-lo dos primeiros dias do Microsoft Paint, em oposição ao software de ponta. Se os controles não parecerem óbvios no início, você pode executar um tutorial rápido ou assistir a um vídeo passo a passo; basta clicar nos botões no canto superior direito da página.
Que arte o GauGAN2 pode produzir?
O objetivo do GauGAN2 é criar imagens fotorrealistas de paisagens como montanhas, lagos e praias.
Há uma biblioteca de rótulos que você pode escolher ao esboçar que ajudam a marcar ainda mais a entrada do esboço, para que o gerador de IA possa renderizar uma imagem apropriada. Isso inclui coisas como neblina, colina, pedra, neve e água, para citar alguns.
Não é difícil que as coisas dêem errado, no entanto, e é provável que você produza imagens absurdas e surreais. Simplesmente pegue a ferramenta lápis e desenhe algumas formas estranhas, e GauGAN cuspirá algo que se parece mais com uma obra de arte experimental do que qualquer coisa reconhecível.
Inserir frases sem sentido na caixa de texto também pode gerar saídas estranhas. Às vezes, você nem precisa ir tão longe; simplesmente pedir uma paisagem montanhosa produziu o que parece ser uma estranha combinação de neve e pêlo.
Em ambos os casos, alguns artistas podem achar uma ferramenta como essa útil. Pode ser usado para acelerar o processo de storyboard ou como uma maneira rápida de criar arte conceitual para um jogo ou vídeo.
Embora esta demonstração esteja muito longe de ser um produto polido pronto para uso, ela mostra um potencial interessante.
GauGAN2: um gerador de arte AI híbrido
GauGAN2 junta-se à coleção de geradores de imagem AI que transformam texto em imagens. Ao contrário de outros aplicativos, no entanto, você pode editar a imagem em etapas, usando esboços e texto como entrada, ajustando a imagem AI como quiser.
Se usado corretamente, o GauGAN2 pode produzir imagens fotorrealistas bastante convincentes da natureza, o que pode ser útil para artistas que precisam preencher um storyboard ou produzir arte conceitual rapidamente. É muito fácil as coisas ficarem bizarras, no entanto, e alguns traços de caneta perdidos podem levar a alguns resultados interessantes.