Olá! Eu sou o GENEL.
Desta vez, criei um vídeo de live-action x animação onde animações desenhadas à mão saltam em um ambiente real e se movem por ele!
https://x.com/genel_ai/status/2081307056838263052
Neste post, vou apresentar:
- Como fazer este vídeo
- Os prompts reais utilizados
Escrever Prompts Aleatoriamente Leva ao Fracasso
Com esse tipo de vídeo, se você começar a escrever prompts aleatoriamente, quase nunca sai do jeito que você quer.
Aqui está o que foi gerado com um prompt como "Animação desenhada à mão se fundindo com um parque de diversões noturno em live-action e a câmera a segue":

Tem alguns pontos bons, mas algumas partes não parecem animação desenhada à mão, e senti que ficou um pouco estranho.
Então, desta vez, pensei detalhadamente na configuração da cena, segundo a segundo, e transformei isso em um prompt.
Primeiro, Reduza a Estrutura a 4 Pontos
Antes de definir os segundos exatos, decidi aproximadamente o que aconteceria dentro dos 15 segundos. Se você ficar muito ambicioso aqui, com certeza vai desandar, então reduzi o núcleo da história a apenas quatro pontos.
- A animação nasce da mão
- Ela entra na tela do PC
- Ela sai do PC e se move pelo quarto
- Ela se transforma em um monstro
É um fluxo único onde "rabiscos invadem um quarto real."

Havia muitas outras coisas que eu queria que fizesse, mas não caberiam em 15 segundos. É aqui que você precisa ter paciência.
Atribuindo a Segmentos de Tempo
Depois que a estrutura é decidida, mapeie-a ao longo do tempo.
0-3 segundos: Uma linha branca nasce da mão, torna-se uma estrela amarela e voa para o PC.
3-6 segundos: Dentro da tela do PC, muda de uma linha vermelha para um coração, depois para um vórtice azul, e então sai.
6-10 segundos: Move-se pelo quarto enquanto se transforma: borboleta -> cobra rosa -> monstro polvo.
10-13 segundos: Abrir a geladeira revela um personagem hambúrguer -> transforma-se em um monstro.
13-15 segundos: Um olho gigante aparece na parede, pisca e se transforma em um sorriso.
Como escrevi no meu artigo anterior sobre VFX, dividir por tempo e escrever em ordem torna o processo estável.
[Clique aqui para o artigo anterior]
https://note.com/genel/n/nb2c4b89fa1d8?sub_rt=share_sb
As instruções parecem ser transmitidas mais facilmente quando divididas em segmentos, em vez de dar uma descrição longa e confusa da situação!
Ferramentas Usadas: ChatGPT e Seedance 2.0
Uma vez decidido isso, o que resta é transformar tudo em vídeo. Usei apenas essas duas ferramentas de IA.
1. ChatGPT | Converte o plano em um prompt 2. Seedance 2.0 | Transforma esse prompt em um vídeo
O segredo é não jogar tudo no ChatGPT e pedir para ele "criar um vídeo legal."
Se você der o plano que você mesmo criou, ele tomará forma quase exatamente como planejado. Por outro lado, se você simplesmente deixar tudo para a IA, terá algo genérico como o exemplo do parque de diversões.
No entanto, se você simplesmente jogar o que decidiu no ChatGPT, ele retornará um texto desconexo e difícil de ler. Se você passar isso diretamente para o Seedance, ainda assim não será estável.
Então, eu especifiquei até a ordem da saída.
1. A linha de abertura (duração, proporção de tela, o que está sendo mesclado com o quê) 2. A atmosfera do espaço live-action e a textura de uma gravação de smartphone 3. Movimento por segundo (0-3s / 3-6s / 6-10s / 10-13s / 13-15s) 4. Um resumo final da textura do desenho à mão, método de rastreamento da câmera, prompts negativos e som ambiente
Aqui está o texto de instrução que dei ao ChatGPT:
1[Instruções para o ChatGPT]2Vou criar um prompt para a geração de um vídeo de 15 segundos.3Por favor, converta o plano abaixo em um prompt para ser passado a uma IA de geração de vídeos.45Plano6Cenário: Um quarto escuro e habitado, iluminado apenas por iluminação indireta quente e pequenas luzes decorativas.7Tipo de Vídeo: Animação glow desenhada à mão mesclada com live-action.8Eventos:90-3s: Uma linha branca nasce de uma mão, torna-se uma estrela amarela e voa para um PC.103-6s: Dentro da tela do PC, linha vermelha -> coração -> vórtice azul, então sai.116-10s: Transforma-se em borboleta -> cobra rosa -> monstro polvo enquanto se move pelo quarto.1210-13s: Abrir a geladeira revela um personagem hambúrguer -> transforma-se em um monstro.1313-15s: Um olho gigante aparece na parede, pisca e se transforma em um sorriso.1415Regras de Escrita:16- Quando as formas mudam, escreva "transforma-se enquanto colapsa na próxima forma" em vez de "desaparece e a próxima aparece."17- No final de cada segmento, descreva sempre o movimento da câmera. A animação se move primeiro, e a câmera a segue com um atraso.18- Mantenha a continuidade da caminhada e do acompanhamento dentro do mesmo espaço, sem cortes.19- Para o lado live-action, simule a filmagem com uma mão em um smartphone. Inclua tremor de câmera, leve caça ao foco, ruído em baixa luz e flutuações de exposição automática.20- Para a animação desenhada à mão, use texturas como giz de cera, giz, lápis de cor ou pincéis ásperos. As linhas devem tremer a cada quadro, com coloração irregular e aspecto difuso.2122Ordem de Saída:231. Uma linha: "15 segundos, vídeo horizontal 16:9. Um vídeo mesclando live-action [local] com animação glow desenhada à mão."242. Atmosfera do espaço live-action e textura de smartphone.253. Cada segmento: 0-3s / 3-6s / 6-10s / 10-13s / 13-15s.264. Resumo final da textura da animação desenhada à mão, rastreamento da câmera, prompts negativos e sons ambientes.2728Prompts Negativos a incluir:293DCG muito preciso, linhas vetoriais muito suaves, expressões tipo tubo de neon, takes de gimbal perfeitamente estáveis, iluminação excessivamente cinematográfica, fotografia comercial perfeitamente composta, legendas, logotipos, BGM.3031Sem cabeçalhos ou explicações necessárias. Produza apenas o texto do prompt.

Tela real do chat do ChatGPT
Aqui está o prompt que foi criado:
115 segundos, vídeo horizontal 16:9. Um vídeo mesclando um interior live-action escuro com animação glow desenhada à mão.2Um quarto um pouco bagunçado e habitado, iluminado apenas por iluminação indireta quente e pequenas luzes de corda decorativas. Forte tremor de câmera, como se filmado com uma mão usando um smartphone, leve caça ao foco, ruído em baixa luz e flutuações de exposição automática. Textura real, não polida como um comercial, mas como se capturada acidentalmente por um indivíduo em seu quarto.30-3s:4Uma mão em live-action erguida à esquerda da tela. Uma linha branca desenhada à mão nasce da ponta dos dedos, agarra-se à mão em live-action e se torna a forma de outra mão branca. As linhas são difusas, como se desenhadas com giz de cera ou giz, e tremem finamente a cada quadro. A mão branca colapsa enquanto se transforma em uma pequena estrela amarela, que voa em direção a um laptop no canto inferior direito com um rastro. A câmera segue a estrela com um leve atraso, fazendo uma panorâmica brusca para o canto inferior direito.53-6s:6A estrela amarela entra na tela do laptop. Linhas vermelhas desenhadas à mão rabiscam violentamente na tela do PC, instantaneamente se transformando em um coração vermelho. O coração treme e muda para um vórtice azul, então salta vigorosamente para fora da tela do PC. A linha azul se estica como algo entre líquido e chama, e a câmera inclina-se rapidamente para cima para segui-la. Desfoque de movimento natural do movimento súbito da câmera.76-10s:8O vórtice azul se transforma em uma borboleta azul clara na parede e voa em direção ao fundo do quarto. A câmera segue a borboleta enquanto caminha. A borboleta se transforma em uma linha rosa semelhante a uma cobra, rastejando ao longo da parede, porta e chão. No centro da porta, a linha rosa gira e se transforma em um pequeno monstro desenhado à mão semelhante a um polvo. O monstro olha para a câmera por um momento e então foge em direção à geladeira. A câmera o segue apressadamente.910-13s:10Raios de luz amarelos desenhados à mão e setas aparecem na porta da geladeira, e a porta se abre. Dentro da geladeira azulada está um personagem hambúrguer fofo com olhos e membros finos. No momento seguinte, a boca do hambúrguer se rasga, transformando-se em um monstro cômico com interior vermelho e presas triangulares. A câmera treme violentamente, como se o cinegrafista estivesse assustado, e a porta da geladeira é fechada rapidamente.1113-15s:12A câmera se move para trás para mostrar o quarto inteiro. O contorno de um olho branco gigante é desenhado na parede superior, e uma pupila azul vívida aparece dentro. Imediatamente após o olho piscar lentamente uma vez, ele se transforma em um sorriso gigante rosa e branco com muitos dentes triangulares. A câmera se inclina de surpresa e a tela escurece para terminar.13A animação desenhada à mão é uma animação quadro a quadro áspera, não CG suave. A espessura da linha, os contornos e a coloração tremem ligeiramente o tempo todo, mantendo a textura de giz de cera, giz, lápis de cor e pincéis ásperos. Cores glow vívidas centradas em branco, amarelo, azul claro, rosa e laranja. Há um brilho fraco ao redor da animação, mas ele não ilumina o espaço live-action com muita força.14A câmera sempre segue um pouco atrás da animação. A animação sai do quadro primeiro, e a câmera de mão faz panorâmica, inclinação ou movimento para frente nessa direção com um atraso. Takes de gimbal perfeitamente estáveis são proibidos. Não use 3DCG muito preciso, linhas vetoriais muito suaves, iluminação cinematográfica, profundidade de campo excessiva, fotografia comercial perfeitamente composta, legendas, logotipos ou BGM. Inclua apenas sons internos, roupas farfalhando, passos, pequenos sons de operação do PC, a abertura e fechamento da geladeira, e sons eletrônicos leves e gritos cômicos das criaturas desenhadas à mão.

Tela real do chat do ChatGPT
Agora, é só pegar este prompt e usar o recurso "Texto para Vídeo" na IA de geração de vídeos "Seedance 2.0"!
Para mais informações sobre o Seedance 2.0, consulte este artigo do Note:
[Clique aqui para o artigo sobre o Seedance 2.0]
https://note.com/genel/n/n3aac3300f211?sub_rt=share_sb
Depois de copiar e colar o prompt, definir o tempo de geração para 15 segundos e gerar o vídeo, fica assim!

Ficou ótimo! Adicionei um BGM gerado com SUNO depois.
Como Criar Diferentes Versões
Esta é a parte que mais quero recomendar desta vez 💡
Você pode estar pensando:
"Agora consigo fazer o mesmo vídeo que o GENEL, mas o que devo fazer se quiser fazer um vídeo diferente?"
📢 Então, preparei instruções que permitem criar e produzir em massa várias versões!!
Apenas copiando e colando estas instruções, você pode gerar vídeos como estes um após o outro!


Estou apresentando-as neste artigo do Note, então dê uma olhada se tiver interesse ✨



![ChatGPT Work: Acabe com o inferno das correções com solicitações de primeira [Modelos incluídos]](https://youmind.club/__ym/cms-assets/media/1785174444638_v6q5ut_HOIfqlObMAAEjxQ.jpg)

