Runway é uma ferramenta de edição de vídeo baseada em navegador. Na superfície, não parece tão diferente de editores populares como Premiere Pro ou DaVinci Resolve. Mas o que diferencia a Runway são suas ferramentas baseadas em IA. Claro, ele possui filtros, texto, áudio multipista, animações de quadro-chave, várias camadas e recursos básicos de edição, mas sua real diferenciação está em suas ferramentas de preenchimento de texto de vídeo, rotoscopia e conteúdo. Em um tweet recente, a Runway exibiu um vídeo promocional para sua próxima ferramenta de conversão de texto em vídeo. Mas resta saber se será apenas um truque com um forte impulso de marketing ou se será uma ferramenta útil para os editores.

Texto para vídeo

O mais novo recurso da Runway, atualmente disponível apenas ao ingressar em uma lista de espera, é o texto sobre vídeo de IA. Esta ferramenta promete editar e gerar vídeos usando descrições escritas em linguagem natural. O vídeo promocional mostra o que eles planejam fazer com a ferramenta. Ele mostra um usuário escrevendo comandos para importar um vídeo de uma rua da cidade, torná-lo cinematográfico (aplicando uma dica de cor), remover um objeto (presumivelmente usando sua ferramenta de preenchimento sensível ao conteúdo Inpainting). A ferramenta é então mostrada gerando imagens de um jardim exuberante, navegando por diferentes estilos. Não está claro se são imagens tiradas de uma pesquisa de imagens ou se são geradas por ferramentas de inteligência artificial, como o recentemente popular DALL-E ou Midjourney. O editor é então mostrado convertendo comandos de texto básicos em edições reais. Essa aparente capacidade de entender e agir em linguagem natural é um avanço tecnológico muito interessante e promissor. Isso pode tornar a edição avançada mais acessível para não profissionais.

A primeira questão aqui é se isso é mais rápido do que a edição normal. Editores experientes ficam mais rápidos com a prática e usando atalhos de teclado e mouse, bem como macros. Para algumas ações, inserir o comando pode demorar mais do que realmente executar a ação.

A segunda questão (que está relacionada com a primeira) é se esses comandos são precisos. Mesmo olhando para os controles neste vídeo, fica claro que pode haver muitos ajustes que podem nem economizar tempo – e certamente não será tão instantâneo quanto prometido.

  • Importar – O exemplo acima importa vídeos de arquivo ou algo que foi importado manualmente? Se for o último, a IA escaneou o conteúdo do vídeo importado e adicionou esses metadados?
  • Dimensionamento ao longo do tempo – Qual a duração da animação? Quanto dá zoom? A escala está se aproximando do ponto central ou de um ponto diferente?
  • Desvanecer no texto – Que tipo de fonte e qual a cor do texto? Quanto tempo demora o desbotamento?
  • Desfocar o fundo – Quanto desfoque é aplicado? Qual é o estilo de desfoque?

Dos comandos listados, o que parece funcionar conforme o esperado é a filtragem de caracteres verdes. Tornar o fundo preto e branco também é provavelmente fácil. Mas neste ponto, é mais rápido do que digitar “preto e branco” em uma lista de filtros e aplicá-lo? Pode ser mais rápido tocar na ação para aplicar algo como um desfoque e depois ajustar a partir dessa linha de base se você não estiver satisfeito com os resultados.

Em suma, a funcionalidade de texto para vídeo parece um salto muito interessante na tecnologia. Mas se esta é uma vitrine interessante da tecnologia de IA ou se ajudará os editores a acelerar seu fluxo de trabalho, ainda não se sabe.

Felizmente, Runway tem outras ferramentas úteis que podem valer a pena. E você pode usá-los agora em vez de entrar em uma lista de espera.

Tela verde

A ferramenta de tela verde da Runway (comumente chamada de rotoscopia) tem usuários de alto perfil com sucessos significativos. Uma das maiores é a equipe gráfica de The Late Show, estrelado por Stephen Colbert. Eles afirmam ter reduzido seu fluxo de trabalho de rotoscopia de horas para minutos. A rotoscopia é claramente o ponto forte da Runway, identificando pessoas e objetos de forma fácil e inteligente. E se você precisar combinar isso com uma simples modificação, a ferramenta pode fazer isso. É fácil imaginar o Runway como parte de um fluxo de trabalho de edição maior, mas grandes produções provavelmente não o usarão como sua única ferramenta de edição em um futuro próximo.

Comparado a outros métodos de rotoscopia populares em softwares como o After Effects, o Runway é competitivo mesmo com a mais nova ferramenta de inteligência artificial da Adobe, Rotobrush 2.0 (confira nosso tutorial em vídeo Rotobrush 2.0 aqui!). Mas um argumento pode ser feito apenas para manter seu fluxo de trabalho dentro do ambiente Adobe, já que Green Screen e Rotobrush 2.0 têm suas próprias deficiências. No vídeo de 2021 abaixo, o canal VFX Corridor no YouTube testa vários métodos de rotoscopia. Mesmo no vídeo abaixo, não é bem a solução de um clique que a Runway parece prometer. Com um assunto em movimento que muda de orientação, são necessários vários cliques para manter o assunto selecionado. Mas mesmo com isso em mente, foi muito mais rápido que as outras alternativas, incluindo o Rotobrush 2.0. O Rotobrush ficou em segundo lugar muito próximo, especialmente em comparação com as rotas mais manuais, mas ainda empalideceu em qualidade em comparação com o Runway. Para citar um dos membros da Corridor Crew: “Normalmente com a IA… você troca velocidade por detalhes, mas com isso você ganha os dois.”

Pintar

O recurso Inpainting da Runway é uma ferramenta de preenchimento sensível ao conteúdo. Isso significa que você pode selecionar um objeto em sua filmagem e o Runway o removerá enquanto preenche o espaço, dependendo do contexto. Este é um recurso em vários softwares e não funcionará sempre. Mas é uma ferramenta fantástica para se livrar de objetos de distração e transeuntes que entraram na sua foto. Simplesmente pinte sobre o objeto que você quer se livrar, e a ferramenta faz o resto. Esse tipo de recurso funciona muito bem em fundos simples com movimento mínimo, mas pode ser um salva-vidas em muitos cenários.

Truque ou mudança de vida?

Com o texto para vídeo ainda atrás de uma fila e sem demos reais ainda disponíveis, há muitas perguntas sobre a eficácia do próximo recurso do Runway. Ainda não está claro. Mas a tecnologia tem muito potencial! Ele ainda precisa de muita intervenção humana, para que não roube muitos empregos. E o tempo economizado dependerá da precisão da ferramenta. Esperamos ver os resultados quando o texto do vídeo for publicado, mas, por enquanto, você deve manter uma boa dose de ceticismo ao assistir aos vídeos promocionais da Runway.

Did you like this?
Tip Curtois P with Cryptocurrency

Donate Bitcoin to Curtois P

Scan to Donate Bitcoin to Curtois P
Scan the QR code or copy the address below into your wallet to send some bitcoin:

Donate Bitcoin Cash to Curtois P

Scan to Donate Bitcoin Cash to Curtois P
Scan the QR code or copy the address below into your wallet to send bitcoin:

Donate Ethereum to Curtois P

Scan to Donate Ethereum to Curtois P
Scan the QR code or copy the address below into your wallet to send some Ether:

Donate Litecoin to Curtois P

Scan to Donate Litecoin to Curtois P
Scan the QR code or copy the address below into your wallet to send some Litecoin:

Donate Monero to Curtois P

Scan to Donate Monero to Curtois P
Scan the QR code or copy the address below into your wallet to send some Monero:

Donate ZCash to Curtois P

Scan to Donate ZCash to Curtois P
Scan the QR code or copy the address below into your wallet to send some ZCash: