- Daniel Voshart, um designer em Toronto, usou a aprendizagem de máquinas e Photoshop para transformar bustos de imperadores romanos em imagens fotorealistas.
- Voshart quis apresentar os imperadores como eles teriam olhado para o fim do seu reinado, não obstante qualquer doença que pudesse ter alterado a sua aparência.
- Sabe-se que os artistas têm exagerado a boa aparência da classe dominante, por isso, presumivelmente, estas imagens são mais justas.
Os artistas têm historicamente exagerado o quão atraentes os governantes eram em seus retratos e esculturas. A Rainha Carolina de Inglaterra disse que era melhor em 1795, quando descreveu o momento em que lançou os olhos sobre o seu noivo, o Rei Jorge IV: “Acho-o muito gordo, e de forma alguma tão bonito como o seu retrato”
Agora, um designer baseado em Toronto está a corrigir algumas dessas liberdades criativas. Soldando aprendizado de máquina, Photoshop e registros históricos, Daniel Voshart transformou 54 bustos do imperador romano do período Principate (27 a.C. a 285 d.C.) em imagens fotorealistas.
⏳ Você ama a história antiga. Nós também. Vamos fazer um trabalho de quarentena juntos.
Originalmente, Voshart empreendeu o trabalho como uma espécie de projecto de quarentena. “Acho que foi a natureza da pandemia, que me fez pensar em qualquer outra coisa, e talvez eu tenha sido atraído pelos detalhes mórbidos da vida dos imperadores”, diz ele à Mecânica Popular. “Eu estava trabalhando em um programa de ficção científica cerca de 2.000 anos no futuro, então talvez eu tenha sido atraído a pensar sobre o passado”
Mas Voshart não poderia ter previsto que as ordens para suas impressões da primeira edição – com imperadores como Augusto, Nero e Decius – iriam explodir em sua página Etsy. “Eu não sabia que a resposta seria tal que eu realmente reduziria as horas do meu trabalho simplesmente para atender a demanda”, diz ele.
O processo não era simplesmente uma questão de ligar as fotos dos bustos para cuspir algum tipo de rosto humano perfeito, diz Voshart. Para gerar os rascunhos para o rosto de cada imperador, Voshart contou fortemente com uma ferramenta de aprendizagem de máquina chamada Artbreeder. O software de código aberto usa redes adversas generativas, ou GANs, para gerar uma imagem.
Se esses soam familiares, é provavelmente porque você já ouviu falar de deepfakes, ou mídia sintética frequentemente usada para fins nefastos. GANs, a tecnologia subjacente em deepfakes, pode ajudar os algoritmos a ir além da simples tarefa de classificar dados e para o domínio da criação de dados – neste caso, imagens. Isto acontece quando dois GANs tentam enganar um ao outro para pensar que uma imagem é real. Usando tão pouco quanto uma imagem, um GAN experimentado e testado pode criar um vídeo clipe de, digamos, Richard Nixon.
Roman Emperors Merch
>
>
>
>
>
>
>
>
Embora os imperadores romanos de Voshart não sejam falsificações profundas, eles compartilham uma estrutura tecnológica semelhante – eles são apenas aplicações diferentes da aprendizagem de máquinas. Especificamente, Artbreeder utiliza o NVidea StyleGAN, um GAN de código aberto que os cientistas informáticos criaram em Dezembro de 2018.
Em uma palestra virtual de 30 de setembro sobre “GANs for Good”, Anima Anandkumar, diretor de pesquisa de aprendizado de máquinas da NVIDIA, explica como a tecnologia funciona. Utilizando uma técnica chamada “disentanglement learning”, o GAN pode separar e controlar melhor certos elementos de estilo isoladamente, algo que artistas como Voshart podem naturalmente fazer muito melhor que máquinas.
“Os humanos são ótimos nisso”, explicou Anandkumar na palestra. “Temos diferentes conceitos que aprendemos quando crianças e fizemos isso de uma forma não supervisionada, e desta forma podemos agora compor, e fazer imagens ou conceitos inteiramente novos”. Na prática, isso significa que um usuário tem mais controle sobre quais propriedades de uma imagem de origem ele gostaria de usar na nova.
Tapa aqui para votar
Joel Simon, o desenvolvedor que criou o Artbreeder, diz à Popular Mechanics que tudo se resume à forma como as redes neurais do programa representam “espaço” nas imagens.
“Quando uma imagem é ‘carregada’, o rosto é cortado e então um processo de busca é feito para encontrar o lugar mais próximo no espaço para aquela imagem”, ele explica. “Uma vez neste ‘espaço’, é fácil ‘mover-se’ adicionando ou subtraindo números que correspondem a valores como a idade ou o sexo, aqui chamados de ‘genes’. Assim, ao adicionar cor, ele o faz de uma maneira muito inteligente, não apenas editando pixels, mas movendo-se através do espaço de todas as faces”
Isso torna mais simples para um artista como Voshart carregar dados de treinamento neste caso, cerca de 800 amostras de bustos do imperador romano – para chegar a uma face hiperrealista com menos artefatos, ou anormalidades introduzidas pelo software.
Pouco, Voshart tinha uma quantidade significativa de trabalho em suas mãos, mesmo depois de usar o software Artbreeder. Em sua fase de teste, antes de produzir as faces do Imperador Romano que são retratadas em suas impressões finais, os resultados vieram montados com anormalidades.
“O resultado sai com muitos artefatos estranhos e tende a se transformar em algum tipo de rosto médio, que é o oposto do que você quer quando você quer manter uma expressão interessante”, diz Voshart. “Meu processo foi mais download do Artbreeder, modificar no Photoshop, e repetir o processo carregando de volta no Artbreeder”.
Even embora possa ser uma dor de cabeça para remover falhas nas imagens geradas, Voshart diz que “não há uma chance remota” ele poderia ter feito o trabalho sem o poder da aprendizagem da máquina.