TLDR
Runways Gen-3 Alpha, ein KI-Videogenerator der nächsten Generation, bietet im Vergleich zu seinem Vorgänger Gen-2 erhebliche Verbesserungen hinsichtlich Kohärenz, Realismus und schneller Einhaltung.
Die generierten Videos, insbesondere jene mit menschlichen Gesichtern, sind äußerst realistisch und wurden im Vergleich zu Sora von OpenAI, das noch nicht veröffentlicht wurde, positiv bewertet.
Gen-3 Alpha unterstützt die vorhandenen Tools von Runway, wie etwa Text-zu-Video, Bild-zu-Video und Text-zu-Bild, bietet aber auch eine feinkörnige zeitliche Kontrolle und die Möglichkeit, fantasievolle Übergänge zu erzeugen und Keyframe-Elemente innerhalb einer Szene präzise festzulegen.
Runway hat mit führenden Unternehmen der Unterhaltungs- und Medienbranche zusammengearbeitet, um maßgeschneiderte Versionen von Gen-3 zu erstellen, die stilistisch kontrolliertere und einheitlichere Charaktere ermöglichen und auf spezifische künstlerische und erzählerische Anforderungen ausgerichtet sind.
Runway, ein führendes Unternehmen in der Entwicklung generativer KI-Tools für Ersteller von Film- und Bildinhalten, hat seinen neuesten Durchbruch vorgestellt: Gen-3 Alpha, einen KI-Videogenerator der nächsten Generation, der die Branche revolutionieren wird.
Das neue Modell, das sich noch in der Alpha-Phase befindet und noch nicht öffentlich verfügbar ist, wurde anhand einer Reihe von Beispielvideos vorgeführt, die im Vergleich zu Runways derzeit verfügbarem Gen-2 einen deutlichen Fortschritt in puncto Kohärenz, Realismus und schneller Umsetzung demonstrieren.
Diese Runway GEN-3-Clips haben für mich einen echten visuellen Reiz. Sie sehen filmisch aus.
Sanft, zurückhaltend (auf eine gute, naturalistische Art), glaubwürdig.
Ich bin gespannt, es auszuprobieren, sobald es verfügbar ist. https://t.co/kZfGQ4Vz83
– PZF (@pzf_ai) 17. Juni 2024
Die generierten Videos, insbesondere jene mit menschlichen Gesichtern, sind so realistisch, dass Mitglieder der KI-Kunst-Community schnell positive Vergleiche mit OpenAIs mit Spannung erwartetem, aber noch nicht erschienenem Sora zogen.
Viele Benutzer lobten die Fähigkeit von Gen-3 Alpha, fotorealistische Charaktere mit einer großen Bandbreite an Aktionen, Gesten und Emotionen zu erstellen. Einige gaben an, dass die generierten Personen „wirklich echt“ aussehen und die besten sind, die sie bisher gesehen haben.
Gen-3 Alpha bietet außerdem eine Reihe von Feinabstimmungstools, darunter flexiblere Bild- und Kamerasteuerungen. Das Modell unterstützt die vorhandenen Tools von Runway, wie Text-zu-Video, Bild-zu-Video und Text-zu-Bild, und verbessert gleichzeitig Steuerungsmodi wie Motion Brush, Advanced Camera Controls und Director Mode.
Eines der herausragendsten Merkmale von Gen-3 Alpha ist die Möglichkeit zur feinkörnigen zeitlichen Steuerung, die die Erzeugung fantasievoller Übergänge und präzises Keyframing von Elementen innerhalb einer Szene ermöglicht.
Anastasis Germanidis, Mitbegründer und CTO von Runway, hat angekündigt, dass Gen-3 Alpha bald für Runway-Abonnenten verfügbar sein wird, darunter Unternehmenskunden und Entwickler im Kreativpartnerprogramm des Unternehmens.
Das neue Modell bietet im Vergleich zu Gen-2 deutlich schnellere Generierungszeiten: Die Generierung eines 5-Sekunden-Clips dauert nur 45 Sekunden und die Generierung eines 10-Sekunden-Clips 90 Sekunden.
Runway hat mit führenden Medienorganisationen zusammengearbeitet, um maßgeschneiderte Versionen von Gen-3 zu erstellen, die stilistisch kontrolliertere und konsistentere Charaktere ermöglichen, die auf spezifische künstlerische und erzählerische Anforderungen zugeschnitten sind.
Diese Partnerschaft spiegelt das Engagement des Unternehmens wider, kreative Prozesse durch KI zu verbessern und den Anforderungen der sich schnell entwickelnden Filmlandschaft gerecht zu werden.
Wie viele KI-Modelle wurde Gen-3 Alpha anhand einer großen Anzahl von Video- und Bildbeispielen trainiert. Runway hat jedoch keine spezifischen Details zu seinen Trainingsdaten bekannt gegeben und verweist auf Wettbewerbs- und rechtliche Gründe.
Dieser Mangel an Transparenz in Bezug auf Trainingsdaten ist ein allgemeiner Trend unter Anbietern generativer KI, da sie ihr geistiges Eigentum schützen und potenzielle Klagen im Zusammenhang mit der Verwendung urheberrechtlich geschützten Materials vermeiden möchten.
Um den wachsenden Bedenken hinsichtlich KI-generierter Inhalte Rechnung zu tragen, hat Runway eine Reihe neuer Sicherheitsvorkehrungen für Gen-3 Alpha implementiert.
Dazu gehören ein internes visuelles und Textmoderationssystem zum Filtern unangemessener oder schädlicher Inhalte sowie ein mit dem C2PA-Standard kompatibles Herkunftssystem zur Überprüfung der Authentizität der mit dem Modell erstellten Medien. Diese Maßnahmen sollen sicherstellen, dass die generierten Inhalte den Nutzungsbedingungen und ethischen Standards von Runway entsprechen.
Die Einführung von Gen-3 Alpha erfolgt zu einem Zeitpunkt, an dem der Wettbewerb im KI-generierten Videobereich zunimmt. Unternehmen wie Luma mit seiner Dream Machine, Adobe mit seinem Videogenerierungsmodell und OpenAIs Sora machen in diesem Bereich allesamt bedeutende Fortschritte.
Der Beitrag Runway stellt Gen-3 Alpha vor: Ein Durchbruch in der KI-Videogenerierung erschien zuerst auf Blockonomi.