Kurz nach seinem Erscheinen im Juni 2024 war die Dream Machine von Luma AI einer der besten Player auf dem KI-Video Markt. Mittlerweile haben sich die Anbieter Runway Gen-3, Kling AI und Minimax von Hailuo AI in Bezug auf Bild- sowie Animationsqualität jedoch an Luma vorbeigeschoben – auch wenn das sicher nur eine Momentaufnahme im Oktober 2024 ist.
Trotzdem nutzen wir Luma AI immer noch gerne. Zum einen wegen der Möglichkeit, vorkonfigurierte Kamerabewegungen zu nutzen, zum anderen wegen der hohen Qualität der First-Frame-Last-Frame Morphing Sequenzen. Wie man die ganz einfach generiert, erklären wir in diesem Artikel:
Inhalte
First Frame – Last Frame kurz erklärt
Das First Frame – Last Frame Feature bei KI-Videogeneratoren ermöglicht es, die Animation eines Videos durch Festlegung des ersten und letzten Bildes eines Videos genauer zu steuern. Die Software animiert dann einen flüssigen Übergang zwischen diesen beiden Bildern. Damit bietet dieses Feature mehr Kontrolle über eine Videosequenz, was u.a. für die Erzeugung konsistenter Animationen sowie komplexen Szenenübergängen wichtig ist.
Bildvorlagen mit Midjourney generieren
Die beiden Bilder (Start und Ende) für das Beispiel habe ich mit Midjourney generiert, das Bild einer realen Person und dann die gleiche Person als Marionette:
- Zunächst habe ich das fotorealistische Bild einer reale Person generieren lassen
- Im zweiten Schritt habe ich das erste Bild über den –cref Parameter im Prompt mitgegeben, also die reale Person als Character Reference für die Marionette auf dem zweiten Bild.
TIPP: Wie genau die Character Reference funktioniert, erklären wir in unserem Midjourney cref Tutorial.
Hier sind die konkreten Prompts, die ich genutzt habe
PROMPT PERSON: full body photo of a man in a black coat and hat, round glasses with transparent orange lenses, with a red cloak under a collar of a jacket, black boots, dressed in gothic, standing on an orange floor, bright orange minimalistic background --ar 2:3 --style raw --v 6.1
PROMPT MARIONETTE: photo of a wooden marionette in a black coat and hat, woolly hair, round glasses with transparent orange lenses, with a red cloak under a collar of a jacket, dressed in gothic, bright orange minimalistic background --ar 2:3 --style raw --cref [URL_PERSON] --cw 25 --v 6.1


Bilder in Luma AI mit First-Frame-Last-Frame animieren
In Luma könnt Ihr über das Image-Icon in der Promptzeile Bilder als Vorlage hochladen.

Habt Ihr das erste Bild (First Frame), in diesem Fall das linke Bild mit der Person hochgeladen, erhaltet Ihr die Möglichkeit auch ein zweites Bild (Last Frame) hochzuladen. Luma AI funktioniert auch nur mit einem Bild, aber für die Variante mit dem First und Last Frame müsst Ihr natürlich zwei verschiedene Bilder hochladen.

Anschließend habt Ihr sogar noch die Möglichkeit, die beiden Bilder und damit den ersten und letzten Frame des Videos zu tauschen.

Ihr könnt das Video ohne Prompt generieren lassen, ich gebe jedoch in der Regel noch ein Morphing im Prompt mit.

Nun heißt es nur noch warten und fertig ist die kurze Sequenz:
Und, wie cool ist das?
FAQ
Was kostet Luma AI?
Luma bietet einen kostenlosen und drei bezahlte Tarife an:
– Der kostenlose Plan beinhaltet 30 Videos pro Monat.
– Für ca. 10 Euro gibt es 70 Videos
– für 30 Euro 150 Videos
– für 65 Euro 310 Videos und
– für 100 Euro 480 Videos
Die angegebenen Preise gelten jeweils bei monatlicher Zahlung.
Welche KI-Videogeneratoren gibt es?
Die wichtigsten KI-Videogeneratoren sind aktuell (10/2024) Runway Gen-3, Kling AI, Minimax, Luma AI und Pika 1.5.