Não, você não pode fazer anime com IA

Tem sido difícil ignorar as conversas que cercaram o desenvolvimento de ferramentas de IA ultimamente. Com o Midjourney usando prompts para gerar imagens e o ChatGPT da OpenAI capaz de gerar um texto aparentemente abrangente, parece que estamos à beira de uma revolução tecnológica empolgante, mas aterrorizante.

Não teve apenas um impacto escolas, concursos de artee editores– após o lançamento da tentativa da Corridor Digital de criar um anime gerado por IA, os animadores dentro e fora do Japão têm se perguntado se é uma solução realista para os problemas da indústria com superprodução.

E geralmente, a conclusão deles foi: Não, não é.


(embed)https://www.youtube.com/watch?v=GVT3WUa-48Y(/embed)

Divulgação completa: Acho a IA divertida. Eu brinquei com o ChatGPT fazendo com que ele escrevesse fanfiction estúpida como, “escreva um conto sobre um Pokémon treinador que derrota o Elite 4 com um Weedle.” Também enviei prompts para MidJourney com “Joker from Persona 5 luta contra robôs com Bob Esponja Calça Quadrada em uma Veneza de ficção científica.”

No entanto, descobri que você raramente obtém o que procura, mesmo quando refina seus prompts para obter um resultado mais específico. Em vez disso, você está pegando o melhor palpite da inteligência e fazendo com que ela forneça iteração após iteração até encontrar algo que esteja “tudo bem”. Isso é mais doloroso quando se trata de MidJourney – não importa de quais dados ele se alimente na web, ele sempre produzirá algo menor que a soma de suas partes. Se produz grande arte, é porque grandes artistas em algum lugar produziram algo semelhante.

E esse mesmo sentimento vale para o curta “ANIME ROCK, PAPER, SCISSORS” da Corridor Digital, uma animação de sete minutos baseada em filmagens de ação ao vivo, usando um modelo de difusão estável treinado em capturas de tela de Hospíciode Caçador de Vampiros D: Sede de Sangue filme. Mesmo se você deixar de lado a grosseria de ter assistido a algo que plagia transparentemente o trabalho de dezenas de artistas sendo usado para fins lucrativos, o resultado não é um anime convincente em primeiro lugar – e é porque uma IA só entende o que os animadores produzem, não o porquê eles o produziram.

‘ANIME ROCHA, PAPEL, TESOURAS’ da Corridor Digital

Enquanto Niko Pueringer, da Corridor, fala longamente sobre “democratizar” a animação em seu vídeo “Did We Just Change Animation”, ele gasta muito pouco tempo se familiarizando com o processo real que está tentando imitar. Em vez disso, o YouTube os criadores filmaram na frente de uma tela verde de si mesmos em trajes realizando as ações, exagerando cada gesto dramaticamente para caber em sua ideia do que é anime. Então, quando a IA transformou esses quadros em equivalentes inspirados em anime, eles decidiram incluir apenas cada segundo quadro em seu vídeo final.

Esta foi uma tentativa de capturar o tempo do anime, mas perdeu a questão fundamental de que a frequência dos quadros no anime está sempre mudando, mesmo dentro das mesmas tomadas. É por isso que os animadores não falam sobre anime em termos de “quadros por segundo” – a contagem de quadros pode mudar a qualquer momento e, às vezes, os personagens serão animados em uma frequência diferente, mesmo quando estiverem na mesma cena. Pode parecer insignificante, mas essas inconsistências, iniciadas pelo falecido Yasuo Otsukasão o núcleo do icônico anime animação limitada estilo. E, infelizmente, para qualquer IA que tente copiá-los, os animadores os tratam como amplamente intuitivos.

Na verdade, o anime 3D lutou contra isso por mais de uma década. As tentativas parecem estranhas se renderizadas a 24 quadros por segundo completos, mas instável se renderizadas a 12fps ou 8fps constantes. Uma das principais razões Estúdio LaranjaOs trabalhos de 3D são elogiados até mesmo entre os céticos do 3D porque eles combinaram com sucesso o tempo do anime 2D depois de trabalhar neles por décadas. A realidade é que não importa o quão digital seja o seu processo, o apelo do anime está na inconsistência e intuição humanas.

image2.png
‘ANIME ROCHA, PAPEL, TESOURAS’ da Corridor Digital

Essa falta de inconsistência também é uma questão importante no trabalho de Corridor. Se você disser a um robô para sempre desenhar um personagem exatamente da mesma maneira, ele fará exatamente isso. Mas a graça de dar aos animadores humanos uma planilha de design de personagem é que você sabe que cada um interpretará as coisas de maneira ligeiramente diferente. Enquanto a Corridor luta para manter seu modelo em um estilo específico – o de Caçador de Vampiros D: Sede de Sangue— a verdade é que o filme nunca teve apenas um olhar. Dependendo do diretor de animação, do animador ou mesmo da distância que o personagem estava da câmera, seus rostos mudam sutilmente ao longo do filme. Não é um erro. É um apelo do meio.

As únicas inconsistências que o modelo de Corridor pode produzir são as muitas falhas nos rostos dos personagens. Não é capaz de entender isso Caçador de Vampiros D: Sede de Sangue foi um filme criado por dezenas de artistas diferentes com muitas inspirações e formas diferentes de criar arte. Não é capaz de entender que os personagens de anime não foram feitos para parecer exatamente os mesmos o tempo todo.

Em última análise, “Anime Rock, Paper, Scissors” é um curta-metragem bruxuleante rotoscopeado. Existe uma maneira de corrigir seus maiores problemas, mas isso seria literalmente o caso de contratar animadores para revisá-lo e fazer ajustes. E nesse ponto, por que não contratá-los para começar?

Mesmo que a geração de IA fique mais inteligente em entender nossos prompts e aprender como a arte é criada, está muito longe de entender por que um artista toma as decisões que toma. Atualmente, as melhores partes do curta-metragem do Corridor Digital são as partes que eles mesmos fizeram – o VFX, a iluminação, a premissa etc. O resto é uma tentativa desajeitada de capturar um estilo que nem a IA nem o próprio Corridor realmente entendem.

Aliás, em um vídeo postado no canal da Corridor, os animadores Tom e Tony Bancroft elogiou o filme, mas notou que muitas das partes realmente impressionantes foram as decisões criativas feitas pelos artistas humanos. Pessoas comuns sem o mesmo tipo de experiência ou ferramentas, disseram eles, não poderiam produzir um resultado semelhante.

image3.png
Curta do anime ‘Dog and Boy’ da Netflix

É difícil saber se a IA realmente terá um lugar na produção de anime. É claro que a tecnologia de aprendizado de máquina e outras formas de geração de computador sempre terão um lugar nos componentes digitais do anime, mas são valiosos porque os criadores de anime estão sempre cientes de exatamente quais dados estão executando. Por exemplo, produção de david estava particularmente entusiasmado com a automação no meio ferramenta cacani por um tempo, embora, mesmo assim, ainda exigisse um toque humano.

Um dos maiores problemas que parecem surgir tanto no aprendizado de máquina quanto na geração de IA é a necessidade de que os humanos consertem o trabalho de um computador. Quando Netflix experimentaram a geração de IA para desenvolver planos de fundo em seu curta de anime “Dog and Boy” com Estúdio Wit, o modelo deles errou notavelmente nos principais detalhes, levando o artista de fundo a repintar a imagem inteira. Não está claro o quanto a inteligência artificial pode ajudar e o quanto pode atrapalhar.

No momento, “anime” é um dos prompts mais populares no Midjourney, mas se alimenta de tantos dados criados por fãs que não é incomum encontrar marcas d’água distorcidas nos cantos das imagens geradas. Ao mesmo tempo, “anime” não é um estilo, para começar – toda vez que você pede a uma IA para criar algo no estilo anime, ela encontra um artista fã ou um designer de personagens profissional para tentar copiar. É incapaz de criar algo novo.

Mesmo que a IA encontre um lugar em outras indústrias, só posso vê-la assumindo um papel importante na produção de anime se ganhar consciência, for para a escola de arte e estudar anime como um processo e não apenas como resultado.

Não, você não pode fazer anime com IA

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *

Rolar para o topo

Cart

Your Cart is Empty

Back To Shop