Mit Act One revolutioniert der KI-Videogenerator Runway die digitale Charakteranimation. Anstatt teurer Motion-Capture-Technik oder aufwändiger manueller Animation könnt Ihr ab sofort ganz simpel ein Video von Euch selbst aufnehmen und die KI überträgt die Mimik, Blickrichtungen und den gesprochenen Text präzise auf den animierten Charakter – sei es eine Comicfigur oder fotorealistische Person. Für das Video reicht Eure Smartphone-Kamera aus, wichtig ist nur ein einfarbiger Hintergrund.
Realistische Animationen von Gesichtern und damit emotionale, KI-generierte Geschichten werden damit zum Kinderspiel.
Inhalte
Schritt 1: Figur generieren
Mit der KI-Bildgenerierung Eurer Wahl generiert Ihr Euch einen Charakter, völlig egal ob fotorealistisch oder nicht. Nur das Gesicht sollte gut genug zu sehen sein. Meinen Character habe ich mit Midjourney generiert.
photo, view from front, of a black wooden astronaut marionette with gray hair and a beard, blue eyes, orange space suit, orange sneaker, wooden arms, sitting on a wooden red bench in an endless toy white sand dunes desert, orange space helmet lies in the sand, hot sunny day, deep blue sky, wide angle, toy landscape
Schritt 2: Video von Dir erstellen
Ihr nehmt Euer Smartphone, stellt Euch vor eine weiße Wand, denkt Euch einen kurzen zum Bild passenden Text aus und sprecht diesen mit passender Mimik ein.
Das Video übertragt Ihr auf Euren Rechner und rechnet es ggfs. etwas kleiner (am Mac z.B. mit QuickTime).
Schritt 3: Runway Act One aufrufen
Ihr findet auf der Startseite von Runway direkt einen Link zu der neuen Funktion „Act One“.
Schritt 4: Bild und Video hochladen
Auch hier könnt Ihr nichts falsch machen: Über den Link auf der Runway Startseite landet Ihr auf einer Seite, auf der Ihr auf der linken Seite oben Euer Video und unten Euer Bild hochladen könnt. Alternativ könnt Ihr einen der vorkonfiguierten Charaktere verwenden.
Nach dem Hochladen prüft Runway, ob auf Eurem Video ein Gesicht wie notwendig zu erkennen ist. Runway hat direkt auf der Seite Tipps verlinkt, wie ihr die Videos am besten aufnehmt.
Falls das Material noch nicht geeignet ist, gibt es eine Fehlermeldung, wenn alles OK ist, könnt Ihr schon gleich die Generierung starten. Jede Sekunde Video kostet 10 Credits, das entspricht ca. $ 0,24 – 10 Sekunden Video würde so ca. $ 2,40 kosten.
Schritt 5: Ergebnis bewundern und genießen
Das Rendering dauert dann einige Zeit, wobei sich das Warten definitiv lohnt!
Hier ein erstes Experiment, in dem wir das Ausgangsmaterial und das Runway Act One Material in einem Video zusammengeschnitten haben:
