Estudo de caso: Jorge I.Aragão

Mas, como isso chegou até a gente? Por que o Jorge Aragão e a inteligência artificial estão envolvidos?

Primeiro, aconteceu uma grande coincidência, que depois conversando com o Jorge, ele falou que não tinha nada a ver.

Mas coincidentemente, quando eu dei uma palestra no Hacktown, lá em Santa Rita do Sapucaí, eu apresentei criando músicas e fiz um pagode. Foi a primeira vez que eu tinha feito um samba. Coloquei para tocar.

A coincidência foi que, logo depois que terminou, eu fui ver minhas DMs e tinha uma DM do Jorge Aragão. Eu pensei: "Poxa, o que aconteceu?" Na minha cabeça, achei que tinham mandado para ele, sei lá. No fim do dia, não tem nada a ver. Depois eu conheci ele e ele falou: "Cara, não, apareceu outro, um real seu lá, e aí eu te mandei mensagem". Então, foi só uma grande coincidência do universo.

A mensagem do Jorge dizia que ele queria aprender. Deve ter sido alguém da equipe do Jorge que está operando as redes sociais dele. Troquei algumas mensagens, falei que eu tinha um curso, mandei o link do curso. Ele me mandou WhatsApp, eu mandei uma mensagem pensando que ia falar com a equipe, e na mensagem já veio um áudio do Jorge Aragão, que é algo muito impressionante receber um áudio do Jorge Aragão.

E a gente estava para fechar uma turma do CR_IA, e o Jorge falou: "Poxa, quero entrar, quero entrar eu e a minha neta". Até então estava tipo, "tá, não, beleza". E aí é isso que a gente vê lá, Jorge Aragão inscrito no curso do CR_IA junto com a neta dele. E a gente ainda estava na dúvida, "tá, beleza, né".

No dia da aula, está lá o Fe dando aula magna, aparece o Jorge Aragão, câmera aberta ali: "Opa, boa noite, boa noite". E segue a aula com a gente. Tivemos que criar a música na frente dele ainda, né? Então, esse foi um pouco da história por trás disso.

Logo na sequência, conversamos um pouco sobre as ambições dele com IA. O Jorge é uma pessoa super inovadora. Vamos ver uns exemplos de vídeo aqui que até contam um pouco disso. Ele tem um histórico de inovação há bastante tempo, é uma pessoa sedenta por aprender e testar novas tecnologias.

Deu um feat muito legal. Conversamos muito sobre projeto mais de curto prazo, que é o que estamos fazendo hoje, e também algumas ideias mais longo prazo, mais avançadas de IA que estamos discutindo.

Chegamos a um modelo para atender uma necessidade mais imediata dele: como criar mais conteúdo sem criar conteúdo? E aí entra muito a inteligência artificial nessa história.

É muito legal isso daí: ele foi o primeiro dono de iPhone do Brasil, tipo umas coisas assim. Muito legal mesmo.

O que fizemos, justamente, um pouco do que o Paulo começou a falar, foi criar um fluxo de criação de conteúdo com o time do Jorge Aragão, especialmente com a Fê, que é a neta dele e trabalha com a gente.

Basicamente, esse fluxo funciona assim:

• Temos uma conversa com o time para descobrir quais são os temas que querem abordar e como vamos trabalhar isso.
• Do nosso lado, pesquisamos as técnicas de inteligência artificial que estão surgindo, o que está rolando de novidade e o que podemos transformar em vídeo.
• Pensamos num formato criativo, aprovamos esse formato com um roteirozinho.
• Trabalhamos junto com uma produtora parceira, educamos essa produtora sobre como fazemos para produzir os vídeos e desenvolvemos isso junto com eles.

Assim, transformamos a pesquisa que estamos fazendo com IA numa educação para a produtora, e convertemos o que pode ser feito para chegar num resultado que tem várias mãos envolvidas: a equipe do Jorge, o CR_IA e a produtora.

No caso, essa produtora é a Mycelium, utilizada para esse projeto específico. Também usamos algumas outras produtoras em outros projetos. No caso da Mycelium, é a produtora do meu irmão.

Eu fiz meu irmão entrar de cabeça na inteligência artificial, falei para ele estudar umas coisas, coloquei ele dentro do CR_IA, comecei a dar um monte de coisas para ele estudar.

Agora, ao entrar no site deles, tem o Rio só de IA. Os caras não param! Um braço de IA lá dentro da Mycelium.

Isso tem muito a ver com o que falamos no CR_IA sobre como as profissões e o que você faz hoje mudam. Eles têm uma produtora que se torna uma produtora de IA porque ganha habilidades com IA.

Isso é muito legal de ver em vários alunos nossos do CR_IA também.

Alguns aprendizados que tivemos ao falar de produção de vídeo com IA:

1. Aprenda quais são as ferramentas novas e o que cada uma pode fazer para te ajudar.
2. Deixe sua ideia adaptável. Muitas vezes as pessoas vêm com uma ideia muito fixa, mas para criação com IA é preciso flexibilidade. Se a ideia estiver cravada, a chance de frustração é muito grande. Um bom projeto tem uma ideia central do que precisa ser comunicado, mas está aberto à execução e adaptação.

Eu sempre digo: se você quiser muito controle, talvez não tenha muita qualidade; se quiser muita qualidade, tem que abrir mão de parte do controle.

A IA será sua parceira criativa, um copiloto. Sabe quando você trabalha com alguém e essa pessoa traz outra ideia? Você aceita, mesmo que não fosse exatamente aquilo. Com a IA é igual: você tenta uma ideia, depois muda um pouco, às vezes o resultado é melhor do que o esperado.

1. Tenha paciência. Para criar uma imagem geramos 800, 1200 imagens. Tem que saber combinar suas habilidades com as da equipe e as ferramentas.
2. Agora vamos ver isso na prática.

Nosso primeiro vídeo com eles deu bastante trabalho, e é legal. Vou colocar para vocês assistirem (espero que o áudio funcione).

História: Jorge Aragão está metido com inteligência artificial.

Nós analisamos anos do trabalho do Jorge Aragão, seu jeito de falar, cantar, e criamos o Jorge e Aragão — a primeira IA do mundo aprendendo samba.

Bom, ele ainda tem muito a aprender.

Mas é por essas e outras que nunca vamos perder o que temos de mais importante: o Jorge humano, de verdade.

Unimos duas paixões dele: tecnologia (ele foi o primeiro dono de iPhone no Brasil, uma música dele foi a única brasileira a tocar em Marte) e o samba.

O papel da IA aqui não é criar música, isso fica para o Jorge de verdade. A IA funciona como uma nova forma dele se conectar com vocês, contar histórias e responder perguntas.

Sigam a gente e mandem nos comentários o que querem saber.

Esse vídeo resume como queríamos trabalhar com o Jorge: a IA será uma extensão do trabalho dele. Não vamos criar música com IA, ele entra com a humanidade e a IA entra em como transformar isso.

Para esse vídeo específico:

• Usamos várias ferramentas, como Fal para criar o LoRa, Midjourney para imagens, Runway para animar os vídeos, Radiant para fazer o avatar falando, Eleven Labs para a narração do começo.
• Também usamos técnicas tradicionais, edição, sound effects, cenas de arquivo.

Esse vídeo não é só IA, tem muita combinação.

Produzir com IA ajuda a ter melhores entregas, resultados mais rápidos e até alguns que você não teria antes.

Por exemplo, no começo do vídeo, quando o Jorge aparece como se fosse um "Minority Report". Essa imagem foi feita com IA, depois complementada com After Effects para inserir vídeo e dar esse efeito.

Uma pessoa que entende de edição de vídeo vai deslanchar muito mais do que quem não entende. Mas quem não entende consegue fazer coisas que antes não conseguiria, o que é muito legal.

Dentro dessas ferramentas, algumas são atualizadas constantemente. Isso será aprofundado em aulas específicas do CR_IA.

Por exemplo, o Fal.ai é excelente, mas hoje talvez usaríamos o Krea para gerar variações mais rápidas e simples.

No caso do Jorge Aragão, enviamos várias imagens dele para treinar a IA e gerar outras imagens no estilo desejado, tentando criar um bonequinho avatar. Apesar de não termos conseguido um avatar 3D perfeito, conseguimos imagens para usar em outras cenas.

No Midjourney, fazemos versões infinitas até achar a melhor combinação — mais parecido com o Jorge, mais bonito, com qualidade. Temos cuidado para que o avatar pareça um personagem, não para enganar ninguém. O "Jorge e Aragão" é um personagem criado.

No vídeo:

• Geramos imagens com fundo verde para facilitar a edição, simulando estúdio com chroma key.
• Usamos o Runway para fazer animações, incluindo troca de fundo e lip sync.
• O Runway é uma plataforma que usamos bastante, pois tem várias funções, como animação, dublagem, recorte de fundo, slow motion.
• Para fazer o avatar falar, foram muitas tentativas ajustando o prompt para sincronizar com o cavaquinho, por exemplo.

É um processo de tentativa e erro e curadoria.

Quanto mais você usa, mais entende o que funciona.

A geração de vídeo com plataformas experimentais exige paciência e abertura para resultados diferentes do imaginado.

No processo de usar prompt para gerar imagens ou vídeos:

• Estabelecemos três prompts diferentes e geramos pelo menos três versões de cada um antes de mudar o prompt.
• Isso ajuda a entender se o problema é o prompt ou a própria IA.
• É preciso insistir e praticar para pegar intimidade com a ferramenta.

Sobre o HeyGen (ferramenta de avatar por imagem):

• Usamos para animar fala do avatar com uma única imagem.
• Hoje usamos menos essa ferramenta, porque as opções de lip sync do Runway melhoraram muito.
• O Eleven Labs é usado para narração. Podemos transformar vozes, como usei para fazer a voz de uma mulher a partir da minha. Também treinamos a voz do próprio Jorge Aragão para outros materiais.

O primeiro vídeo nosso com o Jorge teve mais de cinco ferramentas de IA, além de softwares tradicionais (After Effects, Premiere, Photoshop).

Mesmo com muitas ferramentas, esse processo é mais barato e rápido do que produzir tudo do zero sem IA.

Sobre custos das ferramentas:

• A conta do Midjourney custa cerca de 60 dólares.
• O HeyGen é o mais caro, Runway é cerca de 40 dólares.
• Juntando tudo, cerca de 150 a 200 dólares por mês, considerando o uso para outros projetos.
• A Adobe custa cerca de 270 a 300 reais no Brasil.
• São ferramentas essenciais para entregar conteúdos de qualidade hoje.

Para o vídeo de divulgação do tour do Jorge Aragão pelo Brasil:

• Criamos o avatar no Midjourney, geramos imagens com fundo verde para facilitar animação no Runway.
• Usamos o Runway para fazer o personagem andar em loop e lip sync, ainda sem Act One, então o lip sync não ficou perfeito.
• O processo envolve muitos testes de prompt e ajustes até achar o melhor resultado.
• A ferramenta Runway permite fazer edições como recorte de fundo, animação e sincronização labial.

Sobre o uso de imagens com fundo transparente (PNG) no Midjourney:

• Recentemente descobrimos que o Midjourney pode complementar uma imagem com fundo transparente, facilitando a edição e composição.

No vídeo simples de Natal (o que teve mais views!):

• Usamos o Kling para animação e animamos partes no Runway.
• Criamos assets com fundo verde para facilitar o uso em vídeos variados.
• O avatar criado no Midjourney pode ser editado a qualquer momento para adicionar elementos, como roupinha de Papai Noel.

Pensamentos finais:

• O Jorge Aragão é o protagonista humano, e a IA é uma extensão, não substituição.
• A tecnologia é uma ferramenta que ajuda a dar ritmo, mas a alma vem do ser humano.
• A inspiração vem do coração e da vivência, não da máquina.
• A IA abre portas, mas quem atravessa somos nós.
• A criação com IA é uma parceria; a máquina não substitui a criatividade humana.

Quem quiser mandar feedback ou perguntas, fiquem à vontade! Essa live ficará gravada por 24 horas para não membros e permanentemente para quem é membro.

‍