Quando a gente cria vídeo com inteligência artificial, acho que uma das nossas maiores dificuldades é conseguir fazer a IA trabalhar do jeito que a gente quer que ela trabalhe. É uma grande frustração. A gente fala muito isso aqui no CR_IA, de uma forma geral.
Uma das formas de resolver isso é que algumas ferramentas de inteligência artificial criam funções para você poder modificar um vídeo que você já gravou anteriormente. Neste caso, quero mostrar para vocês uma ferramenta nova do Luma. O Luma também é um dos grandes criadores de vídeo com inteligência artificial há muito tempo, e eles lançaram recentemente uma função nova chamada Modify Video.
Basicamente, o que essa função faz é permitir que você mande o vídeo e ele vai modificando de acordo com seu prompt, de acordo com a imagem e referência que você quiser.
Enfim, uma coisa legal é você separar e baixar um pouquinho o volume para a gente. Uma coisa legal para falar aqui é que nem sempre precisa ser exatamente aquilo que está no vídeo. Às vezes pode ser até objetos, cenários, alguma peça, enfim.
Quero mostrar para vocês como podemos trabalhar com isso e usar daqui para frente no nosso workflow de criação de vídeo. Eu acho que a criatividade sempre vai falar mais forte. Quanto mais criativo você é na sua ideia do vídeo, melhor fica. Mas vamos mostrar para vocês como podemos criar isso. Beleza? Então, vamos lá.
Para começar, acho importante deixar claro que essa ferramenta funciona, quando você entrar no Luma, no caso. Você entra lá no Luma, pode começar um novo projeto.
Eu, como já tenho um projeto aqui e já criei todos os vídeos para mostrar para vocês (que demora um pouquinho para criar), vou partir dele. Mas você poderia criar um novo projeto, selecionar o Modify, tanto aqui ou aqui embaixo — não sei como você vê aí, mas é por aqui que você consegue ver tudo.
Você pode mandar um vídeo de até 10 segundos em qualquer aspecto que ele trabalha, tá? Então, vou voltar para o projeto que estava fazendo, que fica mais fácil da gente ver.
Beleza, eu criei um vídeo simples aqui, andando pela sala, sem nenhuma iluminação boa, só para testar os limites da ferramenta. Esse vídeo tem cinco segundos, e é importante você saber que se fizer até cinco segundos, é metade do preço. Se fizer de cinco a dez, o preço é o normal. Por exemplo, comecei com um vídeo de seis segundos e me dei mal porque foi mais caro.
Existem três tipos de forma de modificar seu vídeo. Vou subir o vídeo que fiz, e quando ele sobe, já aparecem para nós essas três formas: Adhere, Flex e Reimagine.
Achei que foi uma boa sacada deles a forma como mostram isso em cima de um criador, que achei muito legal (inclusive esqueci o nome dele). Qualquer diferença, se você deixar aqui embaixo, vai mudar parte da estrutura e algo vai manter. Na verdade, a estrutura são os detalhes da performance da pessoa. Então, se ela piscar, ele vai piscar também, por exemplo.
Conforme você for aumentando isso, ele pode ficar mais diferente da atuação original. Vai depender muito do que você quer fazer com cada um deles.
Então, o que acho interessante? Se você quer algo que mantenha a personagem e só mude alguns detalhes, mantenha na primeira opção (Adhere), porque ela vai ficar bem parecida com o original.
Se você quer algo completamente novo, criar uma animação e só quer os movimentos ou o jeito que a câmera vai ser jogada, use a outra opção. Vou mostrar alguns exemplos daqui a pouquinho.
Você pode subir um vídeo de até 10 segundos, fazer o upload, e a outra opção que ele dá é se você quer colocar alguma referência de estilo ou do primeiro frame do vídeo. Você pode fazer as duas coisas e vai ter efeitos diferentes em cima disso.
Por exemplo, eu subi testes usando só um prompt. Esse é meu vídeo original.Fiz um prompt direto, dizendo que queria um homem vestindo roupas como um detetive dos anos 1800.
Aqui coloquei uma aderência baixa, então ele manteve uma tatuagem, bigode, parece até um pouco comigo. Com aderência baixa, ele ficou muito diferente, meio velho, e ficou ruim. Acho que quando tentamos fazer alterações menores com aderência menor, é mais fácil dele errar porque tenta manter mais perto do real, mas acaba não chegando em lugar nenhum.
Aqui manteve até a porta, os objetos, mas ficou estranho. Com aderência um pouco maior usando só o prompt melhora um pouco.
Se começar a usar um estilo, você pode escolher uma imagem como referência. Vou adicionar um estilo, por exemplo, e selecionar essa imagem para manter o estilo próximo.
Quando fazemos isso, mesmo sem um frame inicial, ele cria esse frame para a gente e mostra como vai ficar.
Quero mostrar também um truque para quem usa Midjourney, que é basicamente a mesma coisa.
No Midjourney, você pode editar imagens que já tem, subindo uma imagem, por exemplo, o primeiro frame do seu vídeo.
Eu peguei esse primeiro frame com um snapshot no VLC, mas você pode pegar da forma que achar melhor. Com esse first frame em mãos, você pode fazer o que quiser. Por exemplo, tirar algo da cena ou adicionar um chapéu na minha cabeça. Você envia esse frame modificado para o Luma para ser o first frame do seu vídeo, e ele vai seguir completamente a partir desse quadro inicial.
Voltando para o Midjourney, cliquei em editar e subi essa imagem do primeiro quadro. No retexture, você pode colocar o que quiser, como, por exemplo: "A photo of 30s explorer inside a Mayan Ruin." Ele vai criar isso usando a mesma estrutura. Temos outras aulas sobre essa ferramenta, mas é interessante que você pode escolher qualquer um desses resultados para usar como primeiro frame do seu vídeo.
Eu fiz alguns testes mais cedo. Poderia usar qualquer um deles. Trouxe esses frames para o Luma — infelizmente não está funcionando agora, talvez porque meus créditos acabaram enquanto gravava. Mas você pode usar isso para fazer o first frame e conseguir maior controle, vendo o resultado antes de rodar o vídeo inteiro, sem ter que usar o Midjourney.
Mesmo assim, vou mostrar as duas formas que trabalhei aqui. Primeiro, só usei o estilo e dei outro prompt: um detetive num mundo muito tecnológico. Foi um prompt simples, e o resultado é essa cena aqui, com aderência maior.
Depois, usei o first frame criado no Midjourney, que ficou bem interessante. Coloquei como start frame e dei um prompt simples de um detetive dos anos 30 investigando dentro de uma ruína maia. O resultado foi bem melhor e mais interessante. Claro, pode dar para melhorar a qualidade com outras ferramentas, como Topaz, mas talvez não funcione tão bem para o que quero.
Acho que o que funciona melhor para nós são animações. A animação é um bom uso para isso, onde não precisa ter todo o detalhe da textura da pele, por exemplo. Tentei um estilo meio Tim Burton e selecionei um vilão que é um mágico andando dentro de um hotel, vendo uma marionete. Usei esse prompt com aderência mais forte.
Depois testei com aderência baixa usando o mesmo prompt. Você pode notar que, com aderência baixa, aparecem elementos estranhos, como a cartola aparecendo onde eu não tenho no vídeo original. Fica estranho, principalmente porque o vídeo original não tem alta qualidade.
Usei aderência média e mantenho bem a estrutura, mas o resultado ainda não fica tão bom. O que achei mais legal foi com a maior aderência possível. Ficou mais interessante, apesar de o Luma criar alguns elementos extras, como um shake de câmera que não existia no original. Se for isso que você quer, tudo bem.
No final do vídeo, há uma parte estranha que ele criou, um gesto estranho que não sou eu, mas isso é comum nessas manipulações. Se compararmos as versões, a aderência que você coloca muda a qualidade do vídeo, a atuação e quais elementos influenciam o resultado.
Enfim, era isso que queria mostrar para vocês. Sobre escrever os prompts, é importante descrever um pouco a cena, o cenário e o que a pessoa está fazendo, para que a IA entenda bem o que está acontecendo.
Você pode usar o que quiser, seja o estilo ou o start frame. Era isso que queria mostrar nesta aulinha.
Gostaria que vocês testassem. Infelizmente, o Modify que faz isso só está disponível no Luma pago, pelo menos enquanto gravo este vídeo. Existem contas que custam cerca de 10 dólares por mês. Vale a pena testar um pouco.
Não faça como eu, que subi vídeos de mais de cinco segundos e fui cobrado o dobro de créditos. Então, faça vídeos de até cinco segundos para economizar.
Faça com algum vídeo seu na vertical, poste nos stories e marque o nosso curso para que possamos ver, comentar e compartilhar nas nossas redes, ok?
Quero ver o que vocês vão criar com isso por aí. Até a próxima aula!
