Zum Inhalt springen

Werk:AI mit Arnie/Stable Diffusion - Deforum & WrapFusion

aus AufEinWort, der freien Forschung
▶ Kurs Diffusion meistern
📽️ 8 2 Stable Diffusion Deforum und WrapFusion (3:34)
🎓 Stable Diffusion: Deforum & WrapFusion
KI-Videos
▲ Google Colab Wav2Lip: Lasst uns Spaß haben
▶ Stable Diffusion: Deforum & WrapFusion
▼ Stable Wrap Fusion

8 2 Stable Diffusion Deforum und WrapFusion (3:34)

Stable Diffusion DeForum, Stable WrapFusion – das sind zwei Dinge, die wirklich sehr interessant ist. Mit DeForum Diffusion kannst du komplette Animationen machen, und mit WrapFusion kannst du deine Videos verzieren. Ich habe generell auch schon mal auf YouTube zwei Videos davon gepostet. Und ich will dir über die nächsten zwei, drei Videos, vielleicht auch vier, einfach mal aufzeigen, was die einfachste Methode ist, diese Projekte zu verwenden.

Ja, wir haben die Möglichkeit, DeForum in der WebUI zu verwenden, zum Beispiel in Automatic 1111 oder sogar in Forge. Forge haben wir ja bereits schon installiert, also könnten wir das auch hier laufen lassen in Forge und da zum Beispiel auch mit den Flux-Modellen arbeiten. Jedoch finde ich das Ganze wahnsinnig unpraktisch. Was ich mag, ist das Colab Notebook von DeForum.

Und wenn wir hier auf „Go to Colab“ klicken, dann landen wir in einem Notebook, und du siehst ja: Genau dieses Projekt wird nicht länger up to date gehalten. Das hindert aber absolut nicht daran, weiterhin mit diesem Projekt zu arbeiten, weil es immer noch sehr gut funktioniert. Das Wichtigste, was ich hier anmerken will, ist natürlich – ich zeig dir in den nächsten Videos genau, wie das Ganze klappt.

Aber das Wichtigste, was ich dir jetzt sofort sagen will, ist folgendes: Wenn du hier runtergehst beim Model Checkpoint, da kannst du natürlich andere Modelle hier verwenden. Das Defaultmodell – erstmal solltest du vielleicht mit dem arbeiten, um das einfach zu halten. Aber du kannst auch mit den neuesten Stable Diffusion Modellen arbeiten.

Du kannst dafür auf CivitAI gehen. Du weißt ja schon, wie das klappt. Auf CivitAI kannst du natürlich auf „Modelle“ klicken. Du gehst auf „Checkpoints“, weil wir natürlich einen Checkpoint brauchen würden, und wir verwenden dieses „Juggernaut XL“-Modell. Das ist etwas, was du machen könntest. Und auch das hast du dir ja bereits schon runtergeladen für Comfy und für die ganzen anderen Programme.

Dementsprechend würdest du natürlich dieses Modell, das du runtergeladen hast, einfach hier hinzufügen – und das am besten in deinen Google Drive. Wie gesagt: Ich zeig dir noch, wie du dein Drive hier verbindest. Alles, was du machen musst, ist danach deinen Checkpoint hier richtig anzugeben von deinem Google Drive, und das Ganze war’s schon.

Die restlichen Einstellungen sehen hier tatsächlich etwas komplex aus, muss ich zugeben. Jedoch wird es nach den nächsten paar Videos für dich mehr Sinn machen. Dementsprechend viel Spaß in den nächsten Videos.

Und natürlich auch Stable WrapFusion. Auch hier solltest du höchstwahrscheinlich mal auf GitHub gehen. Und auf GitHub findest du auch wieder ein Colab Notebook. Wenn du das Notebook öffnest, dann verwenden wir genau dieses Notebook, weil es hier am einfachsten funktioniert, Stable WrapFusion zu verwenden. Das ist ein Typ, der das hier gemacht hat. Also, WrapFusion ist Open Source. Er hat das hier gemacht, jedoch verlangt er ab und zu, dass wir ihn auf Patreon unterstützen.

Was ich jetzt sagen muss, ist, dass er in diesem GitHub-Repo immer wieder großzügig wird. Dementsprechend können wir diese Version sofort gratis verwenden. Ich sag dir danach im Video, dass du eventuell den Typ auch auf Patreon unterstützen könntest. Jedoch musst du das mittlerweile nicht mehr. Wie gesagt: Er gibt uns hier einige Colab Notebooks komplett gratis. Und ich rate dir, dass du einfach mit diesem gratis Colab Notebook arbeitest. Und das funktioniert ganz genau gleich, wie ich dir danach in den nächsten Videos zeige.

In dem Sinne: Viel Spaß. Das wird vielleicht ein klein wenig komplexer. DeForum und WrapFusion – das sind zwei Extensions von Stable Diffusion. Aber ich denke, die solltest du dir auf alle Fälle einfach mal ansehen, weil die Dinge cool sind.