Runway hat Gen-3 Alpha vorgestellt, das erste Modell einer neuen Serie, das auf einer hochmodernen Infrastruktur für groß angelegtes multimodales Training entwickelt wurde. Dieses bahnbrechende Modell stellt einen bedeutenden Fortschritt in Bezug auf Wiedergabetreue, Konsistenz und Bewegung dar und markiert einen entscheidenden Schritt in Richtung der Entwicklung von General World Models.

Einführung von Gen-3 Alpha

Gen-3 Alpha wurde mit einer Kombination aus Videos und Bildern trainiert und ermöglicht die Nutzung einer Vielzahl von Runways Tools, einschließlich Text zu Video, Bild zu Video und Text zu Bild. Darüber hinaus unterstützt es bestehende Funktionen wie Motion Brush, Advanced Camera Controls und Director Mode. Runway plant zudem die Einführung neuer Werkzeuge, die eine feinere Kontrolle über Struktur, Stil und Bewegung bieten.

Unübertroffene visuelle Wiedergabetreue und Bewegung

Mit Gen-3 Alpha können Benutzer hochdetaillierte und dynamische Videos erstellen. Beispiele für Eingabeaufforderungen sind "Subtile Reflexionen einer Frau auf dem Fenster eines Zuges, der mit hoher Geschwindigkeit durch eine japanische Stadt fährt" und "Ein Astronaut, der durch eine Gasse in Rio de Janeiro läuft". Diese Eingaben führen zu beeindruckenden und realistischen Videos, die ohne nachträgliche Bearbeitung generiert werden.

Erweiterte kreative Kontrolle

Gen-3 Alpha unterstützt eine präzise zeitliche Steuerung und ermöglicht imaginative Übergänge und genaue Key-Framing-Elemente in der Szene. Dies eröffnet neue Möglichkeiten für kreative Erzählungen und detaillierte Animationen. Beispiele für Eingabeaufforderungen sind "Eine extreme Nahaufnahme einer Ameise, die aus ihrem Nest auftaucht" und "Ein Tsunami, der durch eine Gasse in Bulgarien fließt".

Realistische menschliche Darstellungen

Das Modell zeichnet sich durch die Fähigkeit aus, ausdrucksstarke menschliche Charaktere mit einer breiten Palette von Aktionen, Gesten und Emotionen zu erzeugen. Dies schafft neue Möglichkeiten für das Geschichtenerzählen. Beispiele hierfür sind "Ein filmisches Weitporträt eines Mannes, dessen Gesicht vom Leuchten eines Fernsehers erleuchtet wird" und "Eine Nahaufnahme eines älteren Mannes, der Klavier spielt".

Für Künstler, von Künstlern

Die Entwicklung von Gen-3 Alpha war eine Zusammenarbeit eines interdisziplinären Teams aus Forschungsscientists, Ingenieuren und Künstlern. Das Modell wurde entwickelt, um eine Vielzahl von Stilen und filmischen Begriffen zu interpretieren. Beispiele für Eingabeaufforderungen sind "Ansicht aus einem Fenster eines riesigen seltsamen Wesens, das nachts durch eine heruntergekommene Stadt geht" und "Ein Mann aus Felsen, der durch den Wald läuft".

Maßgeschneiderte Anpassungen für die Industrie

Als Teil der Gen-3-Modellfamilie arbeitet Runway mit führenden Unterhaltungs- und Medienorganisationen zusammen, um kundenspezifische Versionen von Gen-3 zu erstellen. Diese Anpassungen ermöglichen stilistisch kontrollierte und konsistente Charaktere und erfüllen spezifische künstlerische und narrative Anforderungen.

Sicherheitsmaßnahmen und verantwortungsvolle Nutzung

Gen-3 Alpha wird mit neuen Sicherheitsmaßnahmen eingeführt, einschließlich eines verbesserten visuellen Moderationssystems und C2PA-Herkunftsstandards, um die verantwortungsvolle Entwicklung und Nutzung von KI-Systemen zu gewährleisten.

Runway setzt mit Gen-3 Alpha neue Maßstäbe in der KI-Videoerstellung und eröffnet Künstlern und Entwicklern weltweit neue kreative Möglichkeiten.