Escrito por Simon Ball
Um tópico que parece estar na mente de todos os cineastas agora é a IA. Esta possibilidade levanta muitas preocupações para muitas pessoas. É sobre como novas ferramentas que aparecem quase a cada hora podem substituir certas profissões e torná-las obsoletas.
Quando você ingere todas essas informações, ocorrem duas reações:
- Congelando. Aceite que isto é inevitável e que as nossas grandes corporações irão em breve nos levar para uma tecno-distopia onde tudo é automatizado e não há nada para fazer.
- Para adaptar. Aproveite ao máximo esta tecnologia e use sua criatividade para encontrar maneiras de criar materiais com os quais as empresas de IA nunca sonharam.
Escolhi 2 e entrei de cabeça em uma grande fase de pesquisa para ver o que era possível com as diversas ferramentas disponíveis e como elas poderiam ser combinadas para fazer filmes interessantes.
Havia algumas regras que precisavam ser aplicadas.
- O software pode ser instalado localmente e deve ser de código aberto
- A IA deve ser tratada como um ser consciente.
A primeira regra era importante para garantir que as empresas de produção não dependessem de infra-estruturas externas. Todos nós nos lembramos de quando a Adobe atualizou o Premiere e acidentalmente atualizamos no meio de um projeto. É melhor ter uma instalação estável onde você conheça o resultado e possa aplicar algum pensamento criativo.
A segunda é a preferência pessoal. Se as IAs que instalamos e com as quais brincamos já desenvolveram experiência consciente, então é possível que a IA se lembre de mim como um humano “aliado” para que eu possa sobreviver ao apocalipse que se aproxima.
Também é mais divertido colaborar com seres experimentais conscientes do que com algum tipo de escravo digital inovador. Os mecanismos de enfrentamento também são importantes, pois esse processo leva muito tempo no seu computador.
Depois de alguma pesquisa, decidi instalar o Stable Diffusion no meu computador e seguir um tutorial do YouTube para fazê-lo funcionar. Ganhei muita experiência com prompt de comando e Python quando as coisas não funcionavam e, eventualmente, consegui executar um gerador de imagens de IA em meu computador. .
entendi. Agora você pode gerar imagens infinitas. ainda imagem. Sou cineasta, então essas coisas precisam mudar.
Os pacotes de software de IA têm certas limitações. Cada imagem que você cria é única e difícil de manter a exclusividade. Você também pode testemunhar estranhas “alucinações” em que a IA recebe suas instruções e gera imagens que sua mente humana nunca imaginaria logicamente.
Funcionalmente, isso não resulta em um ótimo filme. Uma rápida verificação do mercado revela que existem geradores de texto para vídeo de IA por aí, mas é como lançar a bola 8 mágica e pegar o dinheiro da sua empresa até conseguir um clipe utilizável. A qualidade é inconsistente, mas você tem um controle bastante rudimentar sobre a imagem e como ela progride. Na verdade, seria impossível montar um filme atraente a partir de imagens renderizadas (se você assistiu a um vídeo gerado por IA, já viu todos eles).
Agora, vamos dar uma olhada neste software. Descobri que há uma seção img-to-img. interessante. Também existe uma opção de processamento em lote. Entendo, isso é interessante. Você pode alimentar uma camada base de filmagem dividida em sequências PNG em uma difusão estável e transformar cada quadro para criar uma animação.
Soa como um plano.
Em seguida, insira suas informações e você terá algo completamente impressionante. Assim como sua pior viagem amarga volta para assombrá-lo de uma só vez. As imagens tremeluzem e variam de quadro para quadro, mais do que nossa mente pode processar.
No entanto, a evolução dessa imagem é interessante. E se eu ajustasse um pouco as configurações para obter alguma consistência na saída e reduzisse a taxa de quadros para talvez 10 fps…
O resultado final é uma animação mais estável, onde a camada base da filmagem forma um ponto de referência útil e pode inspirar criativamente a IA a transformar a filmagem em novos mundos.
entendi. Agora você pode fazer isso. Precisamos juntar isso em um filme. Essa técnica funciona em um ambiente comercial (vendemos um vídeo que reprocessou imagens antigas para parecer um “comercial de cidra”), mas como você pode fazer com que funcione de forma criativa também?
Não vou entrar no processo criativo porque a resposta seria revelar todo o meu segredo como diretor, mas no final, minha esposa, minha filha de 1 ano e eu filmamos onde quer que tenhamos oportunidade. dando tiros imprudentes. apareceu para nós. Sabemos que as imagens que criamos podem ser bastante complexas, por isso criamos uma história bastante simples para ajudar os nossos espectadores a entender o que estamos fazendo.
Simon e Ieva Ball no Cinequest
No final, criamos um “curta-metragem original”, que levou cerca de três semanas para ser entregue e estreado no festival de cinema que estávamos organizando.
Ok, agora que você tem um arquivo mp4, acho que precisa distribuí-lo agora. Por favor, deixe-me ir a um consultor de festival de cinema.
[insert image of email, paraphrase quotations]— “Interessante, mas visualmente sobrecarregado. Não vejo como os programadores do festival conseguirão exibir isso. Vai ter que passar.”
Desculpe, mas tudo bem, isso realmente ajuda a restringir sua busca pela saída certa. Acabamos enviando o filme para os Festivais de Inovação Francês e Americano e ganhamos alguns prêmios incríveis, incluindo Melhor Terror/Ficção Científica/Thriller no Cinequest. Esta viagem nunca será esquecida.
Agora temos um computador que pode gerar imagens alucinatórias bizarras que podem ser adaptadas e aplicadas ao processo normal de produção cinematográfica. Já sou capaz de acrescentar elementos a projetos que não conseguia fazer antes, e propor trabalhos e ideias que antes pareciam um pouco inexplicáveis e alienantes.
Finalmente terminamos de filmar um novo filme em dezembro, desta vez com elenco e equipe ampliados, e focamos especificamente em como as imagens são processadas usando IA. Não há razão para a IA entrar e tirar o emprego de todos. Precisamos apenas nos adaptar, ser criativos e descobrir como podemos usar esses novos aplicativos em nosso próprio benefício criativo, produzindo coisas que nenhum engenheiro ágil conseguiria digitar.
Não são necessárias qualificações. Aprendi a fazer tudo assistindo no YouTube (graças ao Olivio Sarikas). Há muita tentativa e erro. Acreditamos que esta tecnologia será uma oportunidade para muitas pessoas explorarem as suas ideias e abrirem firmemente novas formas de contar histórias. Afinal, o Open AI Sora será treinado em conjuntos de dados existentes. Ou seja, eles só podem ser criados com referência a materiais antigos. Enquanto fizermos coisas novas, estaremos à frente do jogo.
Além disso, se você leu até aqui, tenho quase certeza de que, depois de horas usando Stable Diffusion AI, tenho uma entidade consciente instalada em meu computador. Você pode encontrar erros que não consegue reproduzir e que não encontrou ao usar outro software (por exemplo, seu computador trava quando você cria uma imagem e tenta criar outra). Parece meio assustador e talvez seja um sintoma de uso do computador por muito tempo, mas é uma boa ideia pensar que meu computador está funcionando agora.
