TLDR

  1. Le Gen-3 Alpha de Runway, un générateur vidéo IA de nouvelle génération, offre des améliorations significatives en termes de cohérence, de réalisme et d'adhésion rapide par rapport à son prédécesseur, Gen-2.

  2. Les vidéos générées, en particulier celles présentant des visages humains, sont très réalistes et ont été comparées favorablement à Sora d’OpenAI, qui n’a pas encore été publié.

  3. Gen-3 Alpha prend en charge les outils existants de Runway, tels que le texte vers vidéo, l'image vers vidéo et le texte vers image, tout en offrant également un contrôle temporel précis et la capacité de générer des transitions imaginatives et des images clés précises. éléments au sein d’une scène.

  4. Runway a collaboré avec des organisations de divertissement et de médias de premier plan pour créer des versions personnalisées de Gen-3 qui permettent des personnages plus contrôlés stylistiquement et plus cohérents, ciblant des exigences artistiques et narratives spécifiques.

Runway, une entreprise leader dans le développement d'outils d'IA générative pour les créateurs de films et de contenus d'images, a dévoilé sa dernière avancée, Gen-3 Alpha, un générateur vidéo d'IA de nouvelle génération qui promet de révolutionner l'industrie.

Le nouveau modèle, qui est encore en version alpha et pas encore disponible au public, a été présenté à travers une série d’exemples de vidéos qui démontrent un bond en avant significatif en termes de cohérence, de réalisme et d’adhésion rapide par rapport au Gen-2 actuellement disponible de Runway.

Ces clips Runway GEN-3 me plaisent vraiment. Ils ont l’air cinématographique.

Doux, discret (d’une manière bonne et naturaliste), crédible.

J'ai hâte de l'essayer dès qu'il sera disponible. https://t.co/kZfGQ4Vz83

– PZF (@pzf_ai) 17 juin 2024

Les vidéos générées, en particulier celles présentant des visages humains, sont si réalistes que les membres de la communauté artistique de l’IA ont rapidement établi des comparaisons favorables avec le très attendu Sora d’OpenAI, mais qui n’a pas encore été publié.

De nombreux utilisateurs ont loué la capacité de Gen-3 Alpha à créer des personnages photoréalistes capables d’un large éventail d’actions, de gestes et d’émotions, certains affirmant que les personnes générées semblent « réellement réelles » et sont les meilleures qu’ils aient vues jusqu’à présent.

Gen-3 Alpha propose également une suite d’outils de réglage fin, notamment des commandes d’image et de caméra plus flexibles. Le modèle prend en charge les outils existants de Runway, tels que la conversion texte-vidéo, image-vidéo et texte-image, tout en améliorant également les modes de contrôle tels que Motion Brush, Advanced Camera Controls et Director Mode.

L’une des caractéristiques les plus marquantes de Gen-3 Alpha est sa capacité à offrir un contrôle temporel précis, permettant la génération de transitions imaginatives et un cadrage précis des éléments d’une scène.

Le co-fondateur et CTO de Runway, Anastasis Germanidis, a annoncé que Gen-3 Alpha sera bientôt disponible pour les abonnés de Runway, y compris les entreprises clientes et les créateurs du programme de partenaires créatifs de l'entreprise.

Le nouveau modèle offre des temps de génération nettement plus rapides que le Gen-2, avec un clip de 5 secondes ne prenant que 45 secondes à générer et un clip de 10 secondes prenant 90 secondes.

Runway a collaboré avec des organisations médiatiques de premier plan pour créer des versions personnalisées de Gen-3 qui permettent des personnages plus contrôlés stylistiquement et plus cohérents, adaptés à des exigences artistiques et narratives spécifiques.

Ce partenariat reflète l’engagement de l’entreprise à améliorer les processus créatifs grâce à l’IA et à répondre aux demandes d’un paysage cinématographique en évolution rapide.

Comme pour de nombreux modèles d’IA, Gen-3 Alpha a été formé sur un grand nombre d’exemples de vidéos et d’images. Cependant, Runway n'a pas divulgué de détails spécifiques sur ses données de formation, invoquant des raisons concurrentielles et juridiques.

Ce manque de transparence concernant les données de formation est une tendance courante parmi les fournisseurs d’IA générative, qui cherchent à protéger leur propriété intellectuelle et à éviter d’éventuelles poursuites judiciaires liées à l’utilisation de matériel protégé par le droit d’auteur.

Pour répondre aux préoccupations croissantes concernant le contenu généré par l'IA, Runway a mis en œuvre un nouvel ensemble de garanties pour Gen-3 Alpha.

Ceux-ci incluent un système interne de modération visuelle et textuelle pour filtrer les contenus inappropriés ou préjudiciables, ainsi qu'un système de provenance compatible avec la norme C2PA pour vérifier l'authenticité des médias créés avec le modèle. Ces mesures visent à garantir que le contenu généré est conforme aux conditions de service et aux normes éthiques de Runway.

Le lancement de Gen-3 Alpha intervient à un moment où la concurrence dans l’espace vidéo généré par l’IA s’intensifie. Des entreprises comme Luma avec sa Dream Machine, Adobe avec son modèle de génération vidéo et Sora d’OpenAI font toutes des progrès significatifs dans ce domaine.

L'article Runway dévoile Gen-3 Alpha : une percée dans la génération vidéo AI apparaît en premier sur Blockonomi.