TLDR
O Gen-3 Alpha da Runway, um gerador de vídeo de IA de próxima geração, oferece melhorias significativas em coerência, realismo e adesão imediata em comparação com seu antecessor, Gen-2.
Os vídeos gerados, especialmente aqueles com rostos humanos, são altamente realistas e foram comparados favoravelmente ao Sora da OpenAI, ainda a ser lançado.
Gen-3 Alpha oferece suporte às ferramentas existentes da Runway, como texto para vídeo, imagem para vídeo e texto para imagem, ao mesmo tempo que oferece controle temporal refinado e a capacidade de gerar transições imaginativas e quadros-chave precisos elementos dentro de uma cena.
A Runway colaborou com as principais organizações de entretenimento e mídia para criar versões personalizadas do Gen-3 que permitem personagens mais estilisticamente controlados e consistentes, visando requisitos artísticos e narrativos específicos.
Runway, uma empresa líder no desenvolvimento de ferramentas generativas de IA para criadores de conteúdo de filmes e imagens, revelou seu mais recente avanço, Gen-3 Alpha, um gerador de vídeo de IA de próxima geração que promete revolucionar a indústria.
O novo modelo, que ainda está em fase alfa e ainda não está disponível publicamente, foi apresentado através de uma série de vídeos de amostra que demonstram um salto significativo em coerência, realismo e adesão imediata em comparação com o Gen-2 atualmente disponível da Runway.
Esses clipes da Runway GEN-3 realmente têm um apelo visual para mim. Eles parecem cinematográficos.
Suave, discreto (de uma forma boa e naturalista), crível.
Estou animado para experimentá-lo assim que estiver disponível. https://t.co/kZfGQ4Vz83
-PZF (@pzf_ai) 17 de junho de 2024
Os vídeos gerados, especialmente aqueles com rostos humanos, são tão realistas que os membros da comunidade artística de IA rapidamente fizeram comparações favoráveis com o altamente aguardado, mas ainda a ser lançado, Sora da OpenAI.
Muitos usuários elogiaram a capacidade do Gen-3 Alpha de criar personagens fotorrealistas capazes de uma ampla gama de ações, gestos e emoções, com alguns afirmando que as pessoas geradas parecem “realmente reais” e são as melhores que já viram até agora.
Gen-3 Alpha também oferece um conjunto de ferramentas de ajuste fino, incluindo controles de imagem e câmera mais flexíveis. O modelo oferece suporte às ferramentas existentes da Runway, como texto para vídeo, imagem para vídeo e texto para imagem, ao mesmo tempo que aprimora modos de controle como Motion Brush, controles avançados de câmera e modo diretor.
Um dos recursos de destaque do Gen-3 Alpha é sua capacidade de oferecer controle temporal refinado, permitindo a geração de transições imaginativas e enquadramentos precisos de elementos em uma cena.
A cofundadora e CTO da Runway, Anastasis Germanidis, anunciou que o Gen-3 Alpha estará disponível em breve para assinantes da Runway, incluindo clientes empresariais e criadores no programa de parceiros criativos da empresa.
O novo modelo oferece tempos de geração significativamente mais rápidos em comparação com o Gen-2, com um clipe de 5 segundos levando apenas 45 segundos para ser gerado e um clipe de 10 segundos levando 90 segundos.
A Runway colaborou com as principais organizações de mídia para criar versões personalizadas do Gen-3 que permitem personagens mais estilisticamente controlados e consistentes, adaptados a requisitos artísticos e narrativos específicos.
Esta parceria reflete o compromisso da empresa em melhorar os processos criativos através da IA e atender às demandas do cenário cinematográfico em rápida evolução.
Tal como acontece com muitos modelos de IA, o Gen-3 Alpha foi treinado em um grande número de exemplos de vídeo e imagem. No entanto, a Runway não divulgou detalhes específicos sobre seus dados de treinamento, alegando motivos competitivos e legais.
Esta falta de transparência em relação aos dados de formação é uma tendência comum entre os fornecedores de IA generativa, uma vez que procuram proteger a sua propriedade intelectual e evitar potenciais ações judiciais relacionadas com a utilização de material protegido por direitos de autor.
Para abordar as preocupações crescentes em torno do conteúdo gerado por IA, a Runway implementou um novo conjunto de salvaguardas para Gen-3 Alpha.
Isso inclui um sistema interno de moderação visual e de texto para filtrar conteúdo impróprio ou prejudicial, bem como um sistema de proveniência compatível com o padrão C2PA para verificar a autenticidade da mídia criada com o modelo. Essas medidas visam garantir que o conteúdo gerado esteja alinhado aos termos de serviço e aos padrões éticos da Runway.
O lançamento do Gen-3 Alpha ocorre num momento em que a concorrência no espaço de vídeo gerado por IA está se intensificando. Empresas como a Luma com a sua Dream Machine, a Adobe com o seu modelo de geração de vídeo e a Sora da OpenAI estão a fazer avanços significativos neste campo.
O posto Runway revela Gen-3 Alpha: um avanço na geração de vídeo AI apareceu pela primeira vez no Blockonomi.