Runway Gen-3 Video-to-Video ist da! Was erst einmal nach einer gar nicht so spannenden Ankündigung klingt, hat sich für mich nach ersten Tests schnell als ein echt geniales Feature entpuppt.
Aber der Reihe nach…
Inhalte
Wo finde ich Runway Gen-3?
Den KI-Videogenerator Runway haben wir Euch bereits mehrfach vorgestellt. Ich erlaube mir daher an dieser Stelle auf unsere entsprechenden Runway-Artikel zu verweisen.
Wo finde ich die Video-to-Video Funktion?
Ihr könnt die Gen-3 Alpha Engine, die für die Funktion notwendig ist, über die Startseite entweder direkt oben über den Gen-3 Hinweis Get started oder über das Menü in der linken Seitenleiste unter Generate Video erreichen.
Videovorlage hochladen
In dem Gen-3 Fenster findet Ihr prominent die Möglichkeit, Medien als Vorlage hochzuladen.
Es können nur Videos im 16:9 Format als Vorlage genutzt werden. Ladet Ihr ein Video in einem anderen Format hoch, ist das aber auch kein Problem: Runway schneidet (Crop video to supported size) das Video dann in das 16:9 Format zurecht.
Achtung! Die Video-to-Video Funktion rechnet entweder 5s (50 Credits) oder 10s (100 Credits) ab. Sobald eine Videovorlage länger als 5 Sekunden ist, werden 10 Sekunden berechnet. Nutzt also entweder wirklich eine längere Vorlage oder kürzt Euer Video auf unter 5 Sekunden (ich nutze dazu am Mac den kostenlosen Quicktime Player).
Prompt für den gewünschten Stil
Als nächstes könnt Ihr in dem Prompt-Feld den gewünschten Stil eingeben. Alternativ wählt Ihr einen Stil aus den Beispielen (Examples) aus.
In dem Prompt könnt Ihr dabei Farben, Stimmungen, Kunststile, Oberflächen, Materialien und vieles mehr vorgeben. Ihr könnt sogar Video-Elemente hinzufügen wie Regen, Risse im Boden oder was Ihr wollt. Only the sky is the limit!
Tipp! Ich habe mir für meine Prompts der Stile von ChatGPT jeweils ein Bild mit dem gewünschten Look beschreiben lassen und zwar ganz gezielt im Hinblick auf den Stil. Ladet dazu einfach ein Bild in ChatGPT über die Büroklammer hoch und schreibt dazu:
Please describe the style of this image in detail so I will be able to transfer it to another image.So hatte ich jeweils perfekte Vorschläge bzw. Vorgaben für meinen jeweiligen Stil-Prompt in Runway.
Die letzte Szene in dem folgenden Beispielvideo hat dabei z.B. den Prompt:
Ford Thunderbird in a limited color palette dominated by cool tones, particularly blues, to create a similar cold and tranquil atmosphere. Include subtle variations in the shades of blue to add depth and interest. Soft, ambient lighting with diffuse shadows. Mystery atmosphere. Icy ground, snowing.Beispiele
Die Ergebnisse sehen dann so aus:
Mit dem Laden des Videos akzeptieren Sie die Datenschutzerklärung von YouTube.
Mehr erfahren
Fazit
Mit der Video to Video Funktion hat Runway ein weiteres wirkliches spannendes Produkt auf den KI-Markt gebracht. Insbesondere, weil es auch mit realen Videos funktioniert.
FAQ
Was bedeutet Video-to-Video?
Video-to-Video bedeutet, dass per KI ein Video (KI generiert wie auch real) als Vorlage genutzt und in einen anderen Stil transformiert wird.
Was bedeutet Text-to-Video?
Text to Video bedeutet, dass nur anhand eines Prompts, also einer Beschreibung in Textform, ein Video per KI generiert wird.
Was bedeutet Image-to-Video?
Image to Video bedeutet, dass auf Grundlage eines Bildes (KI generiert oder real) ein Video per KI generiert wird. Das kann mit und ohne Prompt erfolgen.
