O serviço de criação e edição de vídeo de IA da Runway adicionou o prometido recurso de reformulação de vídeo para vídeo ao seu Modelo Alfa Gen-3 plataforma. A ferramenta de vídeo para vídeo permite que você envie um vídeo e um prompt de texto para alterá-lo. As alterações podem ajustar a configuração, os artistas ou outros elementos do vídeo para corresponder ao prompt de texto ou a qualquer um dos vários estilos de sugestões predefinidos.
O vídeo para vídeo é a última grande adição às opções de criação de vídeo do Runway. O Runway já permite que os usuários comecem com texto ou imagens para definir a aparência e o movimento do vídeo. Agora, ao começar com um vídeo do mundo real, os usuários podem definir o movimento antecipadamente e, em seguida, usar a IA para alterar o design e a estética. O Runway treinou o recurso em um grande conjunto de vídeos e imagens legendados com detalhes para ensinar o modelo de IA a entender os filmes enviados e os prompts para alterá-los. É como ver um novo vídeo de outro universo inteiramente. Você pode ver como funciona abaixo.
“Video to Video representa um novo mecanismo de controle para movimento preciso, expressividade e intenção dentro de gerações”, explicou Runway nas mídias sociais. “Para usar o Video to Video, basta carregar seu vídeo de entrada, solicitar em qualquer direção estética que você goste ou escolher entre uma coleção de estilos predefinidos.”
Filme Multiverso
Quando combinado com a capacidade existente do Gen-3 Alpha de lidar com transições complexas e rostos e emoções humanas expressivas, os resultados podem ser bem espetaculares. A Runway foi rápida em aumentar o Gen-3 Alpha com novas opções. Mais recentemente, a empresa mostrou o Geração 3 Alpha Turbo versão do seu modelo, que sacrifica algumas funcionalidades pela velocidade. Junto com a opção de transformação de vídeo para vídeo, a ferramenta também funciona com Motion Brush, Advanced Camera Controls, Director Mode e outros recursos de edição de vídeo mais granulares.
O Gen-3 Alpha parece muito mais versátil e fácil de usar do que o modelo Gen-2. Dito isso, ele tem limitações, apesar de sua saída impressionante. Atualmente, ele pode gerar videoclipes de até 10 segundos de duração, dificilmente um filme de longa-metragem. Velocidade e qualidade podem compensar isso até que ele possa durar mais. Há cada vez mais competição para a Runway superar, no entanto.
O mais conhecido é OpenAI's Modelo Soramas está longe de ser o único. Estabilidade IAPika, Laboratórios Luma Máquina dos sonhose mais estão correndo para trazer modelos de vídeo de IA ao público. Até mesmo a empresa-mãe do TikTok, Bytedance, tem um criador de vídeo de IA chamado Jimeng.
Se você quiser experimentar a ferramenta de vídeo para vídeo da Runway, o Gen-3 Alpha está disponível para usuários em planos pagos a partir de US$ 12 por mês.
