Werk:AI mit Arnie/DreamMachine von LumaLabs
Auch LumaLabs kann natürlich solche Videos machen, wie zum Beispiel Leute altern lassen. In diesem Video sehen wir uns auch an, wie du das kreieren kannst. DreamMachine von LumaLabs ist ein Tool, das einfach funktioniert, und wo wir wieder mal entweder vom Text oder vom Bild Videos erstellen können.
Ich will dir einen kleinen Überblick geben. Das hier ist mein Account. Ich habe hier mehrere Accounts gemacht. Ich zeige dir mal kurz, wie die Generationen hier aussehen. Erstmal: Du gehst einfach nur auf LumaLabs, meldest dich an mit Google, so wie du es gewohnt bist.
Ich habe hier einige Generationen gemacht, schon, einige sind sehr alt. Sobald das Tool online ging, habe ich sofort ein klein wenig probiert. In anderen Accounts habe ich noch mehr Videos. Ich habe hier einfache Prompts generiert, also: eine Katze, die im Wald spazieren geht, und es sollte cinematisch sein. Und du siehst, das Video wurde auch relativ gut. Die Kompositionen wurden gut berücksichtigt. Die Katze bewegt sich hier gut. Hier: eine alte Frau unter Wasser, die lächelt und sich bewegt. Auch das wurde relativ gut. All das ist aus Videos entstanden. Auch hier mehrere Bilder: Dieser Bigfoot im Wald. Das wurde nicht ganz so, wie ich mir das gedacht hab. Eigentlich sollte das, um ehrlich zu sein, sogar ein Tiger sein, und ich denke nicht, dass das ein Tiger geworden ist.
Diese Kühe auf der Wiese, die sehen mittlerweile doch relativ gut aus. Hier nochmal der Test mit dem Tiger, der besser funktioniert hat. Diesmal macht … haben wir auch wirklich einen Tiger und nicht mehr irgendeinen Bigfoot. Also: gut geklappt. Diese alte Dame unter Wasser hat auch gut geklappt.
Hier habe ich ein lausiges Ergebnis bekommen von fünf Leuten, die im Dschungel rennen. Die Menschen beamen sich fast umher. Dieser Teddybär vor dem Wasserfall, das wurde aber richtig cool. Also: Man kann schon interessante Videos damit machen.
Ich will jetzt etwas hochgehen, denn hier habe ich danach angefangen, Bilder hochzuladen und diese zu animieren, und das hat noch besser funktioniert. Erstmal hier: dieses Video, das ist wieder entstanden nur von Text. Das habe ich hier probiert, indem ich einfach nur den Prompt von Sora genommen habe und hier reinkopiert. Also auch diese Mammuts lassen sich sehen. Dieser Rocket Start, also der Raketen Launch, der lässt sich auch sehen. Hier habe ich aber ein MidJourney-Bild hochgeladen und das animiert.
Auch das: Das war mal ein Bild von MidJourney, und auch das wurde gut animiert. Und hier siehst du noch zwei Bilder, die ich gemacht habe. Die Bilder habe ich gemacht in Flux mit meinem eigenen LoRA, und auch diese Bilder habe ich animiert. Und wie du hier sehen kannst, es hat einigermaßen gut funktioniert. Jedoch fällt die Hand dann hier ein klein wenig zu zerfallen. Das war nicht optimal.
Und dieses Bild oder dieses Video, das ist eigentlich sehr gut geworden. Hier habe ich versucht, Start- und Endframes hinzuzufügen. Also: Du siehst, das ist der Startframe. Der Übergang wurde hier so gemacht, dass es einfach schwarz wurde und danach mein Joker-Bild mit reingeschnitten wurde. Also generell kannst du auch mit Luma Start- und Endframes machen, und du kannst richtig witzige Videos damit generieren. Ich denke schon, dass diese Videos relativ gut sind. Wir haben ganz schwache Kamerabewegungen, weswegen meine Videos hier auch recht gut aussehen.
Wie du hiermit umgehst, ist relativ einfach: Du kannst hier einen Prompt eingeben. Du kannst das entweder loopen, wenn es unendlich laufen soll, du kannst den Enhance-Prompt verwenden oder auch nicht, und du schickst das Ganze los.
Bilder hochladen, die kannst du natürlich, wenn du hier drüben drauf klickst. Jedoch müssen wir erstmal warten, bis das bei den Generationen ist. Schwups, jetzt ist es sofort hier unten. Wenn du Bilder hochladen willst, dann klickst du hier drauf. Du kannst dir ein Bild aussuchen von deinem Desktop oder von wo auch immer. Ich lade einfach mal dieses Bild hoch, und jetzt könnten wir natürlich auch noch einen Endframe hinzufügen. Ich will das gleiche Beispiel machen mit diesen MidJourney-Bildern. In dem Sinne: noch einen Endframe dazu, und schwups, jetzt haben wir die Dinge hier dabei. Und wir schreiben hier noch „Woman aging“, meinetwegen, dazu. Und wir schicken das Ganze los. Dementsprechend können wir auch das jetzt sofort hier testen.
Außerdem haben wir auch noch die Möglichkeit, Kamera-Movements mit einzubauen, ganz genauso, wie du es gewohnt bist. Jedoch will ich dich damit verschonen, damit du nicht in jedem Video das Gleiche sehen musst. Ich zeige dir einfach noch die Ergebnisse, sobald sie hier da sind.
Und tada, da sind die Videos. Also erstmal die alte Dame unter Wasser, auch das kann sich wirklich sehen lassen. Du siehst, das sieht wirklich so aus, als ob das Diffusionsmodell erkennen würde, wie Physik hier ein klein wenig funktioniert, gerade sobald der Kopf das Wasser ein klein wenig verlässt. Ich denke, das ist wirklich ein gutes Video geworden.
Und das zweite Video gefällt mir besonders gut. Wenn du hier drauf gehst, also die kleine Frau oder die Jugendliche mit 14 Jahren verwandelt sich in die 29-jährige Frau. Das sieht wirklich fast genauso aus wie dieses Video, das viral gegangen ist. Gerade wenn wir das jetzt groß machen: Die Verwandlungen, die sehen wirklich unglaublich gut aus. Die sehen fast so aus, als hätte das tatsächlich passieren können. Ich wi…
ich denke, das sind Videos, die du einfach mal versuchen solltest zu erstellen. Du kannst das natürlich auch mit dir machen, wenn du zum Beispiel ein Bild hast von dir, wo du 2, 3, 4 Jahre alt bist, danach eines, wo du 10 bist, wo du 14 bist, 18, 20, 30, 40, 50, 60, 70. Ich weiß nicht, wie alt du bist. Dann kannst du hier deinen gesamten Lebenslauf mit KI nachsimulieren. Und ich denke, das ist wirklich ein wahnsinnig interessanter Anwendungszweck.
Natürlich sind die Videos nicht immer perfekt. Du siehst auch hier: Das Gesicht hat sich ein klein wenig verzogen, teilweise. Aber du musst mit diesen Dingen probieren.
Und was machst du als Nächstes? Du würdest natürlich weitergehen, nochmal ein Video machen mit diesem Endframe, also mit dem Bild, was wir zum Schluss hochgeladen haben. Das danach wieder hochladen und natürlich nochmal ein anderes Bild hinzufügen, wo die Frau noch älter ist. Das wieder dazu packen. Und dann kannst du die Videos so zusammenschneiden, damit du Bilder hast, beziehungsweise Videos hast, wie du oder wie fiktive Personen altern. Und ich denke, die Videos sind cool. Das war LumaLabs, und ich denke, LumaLabs ist cool.