TLDR
Gen-3 Alpha de la Runway, un generator video AI de ultimă generație, oferă îmbunătățiri semnificative ale coerenței, realismului și aderării prompte în comparație cu predecesorul său, Gen-2.
Videoclipurile generate, în special cele care prezintă fețe umane, sunt extrem de realiste și au fost comparate favorabil cu Sora de la OpenAI.
Gen-3 Alpha acceptă instrumentele existente ale Runway, cum ar fi text-to-video, imagine-to-video și text-to-image, oferind, de asemenea, control temporal fin și capacitatea de a genera tranziții imaginative și cadru-cheie precis. elemente din cadrul unei scene.
Runway a colaborat cu organizații de top de divertisment și media pentru a crea versiuni personalizate ale Gen-3, care permit personaje mai controlate stilistic și mai consistente, țintind cerințe artistice și narative specifice.
Runway, o companie lider în dezvoltarea de instrumente AI generative pentru creatorii de conținut de film și imagini, a dezvăluit cea mai recentă descoperire, Gen-3 Alpha, un generator de video AI de ultimă generație care promite să revoluționeze industria.
Noul model, care este încă în alfa și nu este încă disponibil public, a fost prezentat printr-o serie de exemple de videoclipuri care demonstrează un salt înainte semnificativ în coerență, realism și aderență promptă în comparație cu Gen-2 disponibil în prezent de la Runway.
Aceste clipuri Runway GEN-3 au într-adevăr un atractiv vizual pentru mine. Arata cinematografic.
Neted, subestimat (într-un mod bun, naturalist), credibil.
Sunt încântat să-l încerc după ce va deveni disponibil. https://t.co/kZfGQ4Vz83
— PZF (@pzf_ai) 17 iunie 2024
Videoclipurile generate, în special cele care prezintă chipuri umane, sunt atât de realiste încât membrii comunității de artă AI au făcut rapid comparații favorabile cu Sora, foarte așteptată, dar care nu a fost încă lansată, de la OpenAI.
Mulți utilizatori au lăudat capacitatea Gen-3 Alpha de a crea personaje fotorealiste capabile de o gamă largă de acțiuni, gesturi și emoții, unii afirmând că oamenii generați arată „de fapt reali” și sunt cei mai buni pe care i-au văzut până acum.
Gen-3 Alpha oferă, de asemenea, o suită de instrumente de reglare fină, inclusiv comenzi mai flexibile pentru imagine și cameră. Modelul acceptă instrumentele existente ale Runway, cum ar fi text-to-video, imagine-video și text-to-image, în timp ce îmbunătățește modurile de control precum Motion Brush, Advanced Camera Controls și Director Mode.
Una dintre caracteristicile remarcabile ale Gen-3 Alpha este capacitatea sa de a oferi un control temporal fin, permițând generarea de tranziții imaginative și încadrarea precisă a elementelor dintr-o scenă.
Cofondatorul și CTO al Runway, Anastasis Germanidis, a anunțat că Gen-3 Alpha va fi disponibil în curând pentru abonații Runway, inclusiv pentru clienții întreprinderilor și creatorii din programul de parteneri creativi al companiei.
Noul model oferă timpi de generare semnificativ mai rapid în comparație cu Gen-2, cu un clip de 5 secunde care durează doar 45 de secunde pentru a fi generat și un clip de 10 secunde durând 90 de secunde.
Runway a colaborat cu organizații media de top pentru a crea versiuni personalizate ale Gen-3, care permit personaje mai controlate stilistic și mai consistente, adaptate cerințelor artistice și narative specifice.
Acest parteneriat reflectă angajamentul companiei de a îmbunătăți procesele creative prin intermediul inteligenței artificiale și de a satisface cerințele peisajului cinematografic care evoluează rapid.
Ca și în cazul multor modele AI, Gen-3 Alpha a fost instruit pe un număr mare de exemple video și imagini. Cu toate acestea, Runway nu a dezvăluit detalii specifice despre datele sale de antrenament, invocând motive competitive și legale.
Această lipsă de transparență în ceea ce privește datele de instruire este o tendință comună în rândul furnizorilor de AI generative, deoarece ei încearcă să-și protejeze proprietatea intelectuală și să evite potențiale procese legate de utilizarea materialelor protejate prin drepturi de autor.
Pentru a răspunde preocupărilor tot mai mari legate de conținutul generat de AI, Runway a implementat un nou set de măsuri de protecție pentru Gen-3 Alpha.
Acestea includ un sistem intern de moderare vizuală și text pentru a filtra conținutul inadecvat sau dăunător, precum și un sistem de proveniență compatibil cu standardul C2PA pentru a verifica autenticitatea conținutului media creat cu modelul. Aceste măsuri urmăresc să se asigure că conținutul generat este aliniat cu termenii și standardele etice ale Runway.
Lansarea Gen-3 Alpha vine într-un moment în care concurența în spațiul video generat de AI se intensifică. Companii precum Luma cu Dream Machine, Adobe cu modelul său de generare de videoclipuri și Sora de la OpenAI fac toate progrese semnificative în acest domeniu.
Postarea Pista dezvăluie Gen-3 Alpha: O descoperire în generarea video AI a apărut mai întâi pe Blockonomi.