Eu criei anteriormente um projeto de Habilidades de Edição com mais de 2.000 estrelas.
Desta vez, integrei o Codex para uma grande atualização: ele agora pode cuidar dos processos subsequentes, continuando com storyboard, animação e síntese.
Ele já me ajudou a produzir vários vídeos com milhares de curtidas.
No passado, fazer um vídeo significava abrir o Jianying (CapCut).
Agora, depois de instalar as Habilidades, você só precisa dar o vídeo e o roteiro para o Agent, e ele consegue executar toda a produção.
Como eu fiz?
Passo um: Faça o Agent instalar as Habilidades de Edição.
O prompt é simples:
Me ajude a instalar ou atualizar as habilidades de edição chengfeng-videocut-skills. O endereço de instalação é
O Agent vai confirmar com você primeiro e então executar a instalação por conta própria. Uma vez instaladas, essas habilidades de edição podem ser chamadas localmente.
Gerando Vídeo Editado e Legendas
Passo dois: Organize a filmagem bruta da cabeça falante em um pacote de material básico.
Ao dar o vídeo da cabeça falante e o roteiro para a Habilidade "Editar Cabeça Falante", podemos obter o vídeo editado e os arquivos de legenda.
O vídeo da cabeça falante não precisa ser complexo. Geralmente, eu só leio o roteiro uma vez. Se operações específicas estiverem envolvidas, eu mudo de tela e gravo o processo.
Basta inserir um comando de barra no projeto:
/EditTalkingHead + endereço do vídeo + endereço do roteiro
Após receber o comando, o Agent primeiro gera uma página de revisão.
O Agent primeiro organiza pausas, erros de pronúncia e retomadas. Tudo que preciso fazer é confirmar se essas exclusões estão corretas.
Depois de confirmado, clico em "Executar Edição".
Após esta etapa, o Agent produz diretamente o vídeo editado e os arquivos de legenda. As legendas resultantes estão sincronizadas com o tempo do vídeo editado.
Gerando Páginas de Storyboard Baseadas nas Legendas
Assim que o pacote de material estiver pronto, insira um comando de barra no projeto para ativar a Habilidade "Produto Final da Cabeça Falante".
/TalkingHeadFinishedProduct
O Agent vai gerar uma página de verificação de storyboard em HTML.
À esquerda está o visual gerado pelo Agent; à direita estão as legendas, tarefas visuais, fontes de material e movimentos de câmera.
Esta Habilidade na verdade faz três coisas na página de storyboard:
Primeiro, ela divide os segmentos de acordo com a linha do tempo das legendas, depois seleciona a fonte visual com base no conteúdo de cada segmento.
Para cada frase, o Agent decide se mantém o vídeo original, substitui por uma captura de tela, uma página de produto, uma página de resultado, ou cria uma animação HTML ali mesmo.
Se você não estiver satisfeito com um segmento, basta dizer ao Codex qual parte de qual segmento está errada. É muito rápido de modificar.
Por exemplo:
Altere a animação no segmento 05. Faça a seta apontar para o título e circule o resultado à direita.
O Computer Use do Codex pode abrir a página, olhar o visual à esquerda e a fala à direita, e então voltar para modificar o visual HTML ou as anotações.
Minhas ações mudaram de "organizar storyboards eu mesmo" para "revisar storyboards e solicitar modificações com um clique."
Verificando a Prévia da Linha do Tempo
Após a página de storyboard ser confirmada, você pode entrar na prévia da linha do tempo.
À esquerda está a prévia do vídeo; na parte inferior, há uma barra de progresso com descrições de texto; à direita está o conteúdo da cabeça falante.
A prévia da linha do tempo organiza as animações de acordo com os timestamps das legendas. Onde quer que as legendas vão, a animação aparece lá, o que economiza muito mais trabalho do que alinhar manualmente as linhas do tempo em softwares de edição.
O que estamos verificando aqui é: esses visuais aparecem corretamente quando colocados de volta no vídeo completo?
Se houver um erro, o feedback não precisa ser um texto longo; basta falar por segmento:
01 Manter vídeo original. 02 Imagem aparece cedo demais. 03 Visual está muito poluído, apagar as duas linhas de texto na parte inferior.
Só após esta etapa ser confirmada é que entramos na síntese final.
Usando HyperFrames para a Síntese
Após a prévia do vídeo anterior ser confirmada, você pode deixar o Agent sintetizá-lo.
O Agent usará o HyperFrames para transformá-lo em um projeto de animação de vídeo renderizável.
O HyperFrames é muito amigável para Agents porque pode transformar animações HTML em vídeo. Contanto que o visual possa ser feito com HTML, ele pode entrar neste fluxo de trabalho de síntese.
Depois de alguns minutos, você pode ver a animação final.
Agents de Edição Estão Gradualmente Substituindo a Edição Tradicional
No passado, a produção de vídeo girava em torno da linha do tempo.
Agora, a produção de vídeo está começando a girar em torno do fluxo de trabalho.
Agents de Edição estão substituindo a camada operacional na edição tradicional, transformando a produção de vídeo em um processo automatizado que pode ser continuamente reutilizado.
