Quando o vídeo de IA começa a parecer real?

Duas perguntas diferentes escondidas numa só

Um tópico que pergunta se um clipe parece real pode se dividir em poucas respostas. Um grupo discute o quadro: a pele, os olhos, o jeito de virar a cabeça. O outro discute tudo em volta do quadro: se o plano seguinte é o mesmo lugar, se o casaco ainda é o mesmo casaco. Uma resposta num desses tópicos definiu com precisão o padrão do primeiro grupo:

Um indício é um artefato ou uma qualidade exclusiva da geração por IA, como morphing, descompassos de timing (músculos faciais se movendo fora de sincronia)

E outra resposta no mesmo tópico do r/aivideo nomeou o problema do segundo grupo com a mesma precisão:

O desafio é fazer esses clipes terem o mesmo mundo que os outros clipes.

São problemas de engenharia separados. O primeiro se resolve dentro de uma única geração; o segundo, pelo que cada geração recebe para trabalhar. Um clipe pode passar perfeitamente no primeiro teste e ainda assim falhar no instante em que é cortado junto ao vizinho, e por isso uma demonstração curta de um plano só pode parecer mais real do que uma cena pronta feita com o mesmo modelo.

Dentro do quadro: específico, iluminado, com causa

Quase tudo o que faz um plano parecer gerado vem de três tipos de vagueza na descrição.

• Rostos genéricos. Um rosto descrito com palavras como bonito ou marcante puxa para o rosto médio do modelo: liso, simétrico, limpo demais. Um rosto se torna específico por coisas que podem ser desenhadas — o formato dos olhos, a ponte do nariz, uma linha do cabelo irregular, uma âncora como um dente lascado ou uma cicatriz atravessando a sobrancelha.
• Luz de lugar nenhum. A luz gerada tende ao favorecedor e onipresente. Dê a cada plano uma fonte: o abajur da mesa, a porta da geladeira, o meio-dia nublado, faróis atravessando um teto. As fichas de referência são deliberadamente iluminadas de modo uniforme para poderem ser usadas em qualquer cena; o clima pertence ao texto do plano, onde pode mudar de cena para cena.
• Movimento sem causa. A descrição de um efeito — um derramamento dramático, um ar de ameaça — é uma imagem que o modelo precisa inventar. Uma causa — o trem freia e o café vira — é física que ele consegue seguir. Escreva a causa e o resultado parece merecido.

Escolha um visual de live-action para live-action: HD Digital para uma sensação de streaming atual, Gravado em Filme para granulação e calor. Um visual 3D realista é computação gráfica, não fotografia, e se lê assim. A lista prática está em como deixar o vídeo de IA mais realista.

Através do corte: o mesmo mundo todas as vezes

A metade mais difícil é o ponto da segunda resposta. Quem viu uma sala da porta sabe onde fica a janela; quando o contracampo põe a janela na parede errada, a ilusão se desfaz em um quadro. Isso não se conserta deixando cada plano mais fotográfico. É preciso que todos os planos partam dos mesmos fatos.

Três coisas fazem esse trabalho no SceneMixer. Cada personagem, locação e objeto importante tem uma imagem de referência que acompanha todo plano em que aparece, de modo que o casaco, o rosto e a chave de latão continuam os mesmos. Cada cena recebe um modelo tridimensional automático, de modo que a câmera só corta para ângulos que existem naquela sala e as pessoas ficam onde estavam. E cada segmento começa onde o anterior terminou, de modo que uma caminhada pela sala não recomeça no meio. Nada disso é um filtro sobre a imagem; é informação que a geração recebe antes de começar.

O que dizem as contagens da comunidade

Tópicos de recepção são uma boa parte da conversa — 7,000 posts levam um rótulo de recepção do público, e 1,300 posts reclamam de artefatos visíveis. As duas perguntas por trás desta página:

A segunda formulação é a mais comum, e é a que convida a uma inspeção quadro a quadro. Feita sobre uma cena inteira e não sobre um único clipe, a resposta honesta deixa de ser sim ou não e passa a ser quais planos e por quê.

A resolução vem por último

O detalhe importa, mas é o passo final, não o primeiro. Um clipe suave num mundo consistente parece real antes de um clipe nítido numa sala que se reorganiza sozinha. A ordem econômica é fazer o rascunho de cada segmento na resolução mais baixa, corrigir o texto onde um plano está errado, gerar de novo os que valem a pena num nível mais alto e só então subir os melhores clipes um degrau de resolução com Aprimorar — mesmo enquadramento, mesma atuação, mais detalhe. O vídeo é cobrado por segundo renderizado, a partir de 10 créditos por segundo no nível padrão, então gastar com detalhe só depois que a cena funciona é também o caminho mais barato.

Quando o realismo não se aplica

• Alguns trabalhos não são feitos para passar por reais: animação estilizada, videoclipes, sequências de sonho. Remover os indícios nesses casos pode achatar o que torna a obra distintiva.
• Imitar o rosto de uma pessoa real é recusado, e passar imagens geradas por acontecimentos reais é um assunto totalmente diferente; sinalize o material gerado onde as plataformas pedirem.
• Multidões, mãos em trabalho fino e texto na tela continuam sendo as áreas mais fracas; mantenha-os fora dos closes em vez de esperar que uma nova tentativa resolva.
• As contagens são aproximações baseadas em regras de uma única janela de coleta, e as respostas citadas são opiniões de espectadores individuais.

Perguntas frequentes

As duas metades são tratadas a fundo em como descrever um rosto e como a consistência espacial se mantém; a resposta sobre por que um personagem muda entre planos cobre o lado do rosto na continuidade. Veja a nota de método para saber como as contagens foram feitas.