Info zum FLUX Training mit Tags als Caption: Wie im Video erwähnt haben die Tests mit der LoRA, in der Tags verwendet worden sind (wossi86,1boy, glasses, beard,...), es nicht mehr ins Video geschafft. Scheint aber auch gut, wenn nicht sogar besser zu funktionieren. Das Thumbnail (Titelbild) ist auch damit entstanden. Ich finde das Modell ist dann doch deutlich flexibler als wenn man die lange Caption verwendend.
wobei man sagen muss, das DAS, was da ab 36.33 Minute gezeigt wird, nicht der Regelfall ist. Dort kommt man nur hin, wenn man eine Face Lora erstellt, und die Gatekeeper Funktion dich durch lässt. Die Gatekeeper Funktion (Türsteher ), ist aufgrund der strengen US Gesetze dort drinnen. In dem Moment, wo Bilder im Dataset sind, die über eine Face-Lora hinaus gehen, und den Körper zeigen - also für eine Bodyshape-Lora, dann bekommt man auf Civitai nach dem Training ein völlig anderes 3 Spaltenraster, links "1Girl"- Spalte, "1girl, looking at viewer, earrings, tension, solo, shirt" mit epochen Bildern, die mit Deinem Dataset von der weiblichen Lora-Anwärterin nichts zutun haben, in der Mitte die Gatekeeper-Spalte, wo der Text beginnt "fine art parody", also der Hinweis, das das Lora Training sabotiert wurde, und in der rechten Spalte "1boy", also ein männliches Gegenstück zu Deinem weiblichen Dataset. Somit wird Dein so trainiertes Lora in allen Epochen auch jede Menge Bilder produzieren, wo aus der weiblichen Lora eine Transe geworden ist. Den Gatekeeper gibt es nicht nur bei Civitai, ein anderer Deutscher, der allerdings auf Englisch moderiert, hat in seinem yt video "Easiest FLUX.1 LORA Training Guide - Full Workflow" ein Dataset hochgeladen, das ausschliesslich aus Ki generierten Bildern besteht, - das hat bei ihm geklappt. Bei MimicPC hab ich nach der Anleitung "Fast and EASY Flux LORA Training with AI-Toolkit and MimicPC" dasselbe Dataset, wie bei Civitai hochgeladen, und bin dann zu einer Lora gekommen, die manchmal Greisin ist, oft den Körper einer MuskelFrau hat, oder der Kopf erheblich zu klein zum Körper ist. Nur jedes 5 Bild, was generiert wurde, taugt was, weil es das Gesichtserkennungsprogramm erkennen würde. Hauptthema sollte deshalb sein, sein Lora Datenset am Gatekeeper vorbei zu bekommen.
Das sind aber schon ziemlich fragwürdige Unterstellungen.... Natürlich kann es, wie bei vielen AI Diensten sein, dass es gewisse Vorkehrungen, wie Blacklists für Wörter um kein "Mist" zu gestallten existieren. Aber, dass das Training hier verfälscht wird, schließe ich bisher aus. Werde mich aber natürlich weiter damit beschäftigen und sollte ich was finden, wird ein Video darüber entstehen. Zu deinen Angeben hier und auch im anderen Kommentar habe ich Fragen, bzw eine Vermutung, warum du so stark abweichende Ergebnisse hast. Bezogen auf "Fast and EASY Flux LORA Training with AI-Toolkit and MimicPC": Wenn du es dort nach der Anleitung machst, trainierst du es wohl nicht über Kohya GUI sonder über das "AI Toolkit", so erklärt der gute Mann es dort zumindest, auch wenn es dort Kohya_SS auch gibt. Dann ist es selbstverständlich, dass die Ergebnisse stark abweichen... Wir haben bei Civit die Auswahl aus Kohya oder rapit. Und bei Kohya sind die Einstellungen vereinfacht. Ich hab Kohya für paar SDXL Tests auf meinen Rechner trainieren lassen und später mit Civit verglichen und die Ergebnisse sind recht gleich. Zu deinen 3 Spalten bin ich mir nicht sicher, was du damit sagen möchtest. Die Test werden, wenn man die Prompt Felder leer lässt, zufällig ausgesucht. ZUFÄLLIG... da kann dann auch mal 1girl drin stehen als Prompt. Dies hat nichts mit deiner LoRA zu tun. Hier kann man auch selber was rein schreiben, wenn man seine LoRA z.B. auf Flexibilität angeht testen möchte, also verschiedene Styles, Kleidung oder auch Geschlecht.
Hi Wossi :-) endlich - DANKE DANKE DANKE :-) ich nutze die Lora Funktion von CivitAI schon eine ganze Weile und habe im Grunde genommen gute Ergebnisse ohne zu wissen, was ich einstelle. FLUX sei es gedankt ;-) Die Einstellungen, die Du verwendest hast Du lediglich für ein Gesicht verwendet - aber wie ist es bei komplexeren Bildern. Insbesondere bei menschlichen Körpern ist das Übertrainieren flux passiert. Während die Kleidung noch top ausschaut sind Gesichter rauschig oder die Hand hängt am Bein :/ Hast Du dafür eine geeignete Einstellung parat?
Kannst du ein Tutorial Video machen, wie man Videos einen Untertitel hinzufügt? Wenn es möglich ist, auch die Ausgangssprache in andere Sprachen übersetzten, als Untertitel.
funktioniert Super, problem ist nur wenn man eine 2te person ins flux lädt, werden dann beide FLUX Models auf beide Charaktäre angewandt... kann man das ändern?
Das ist ziemlich cool. Aber eine Frage: Wie schaffst Du es bei der Bilderstellung mit der eigenen LORA wenn man mehrere Personen auf dem Bild hat? Die haben nämlich alle mein Gesicht *lol*
hab bisher denselben Bilderset bei mehreren Anbietern getestet, und immer unterschiedliche Ergebnisse bekommen. Bei Civitai hatte ich die unterschiedlichen Gesichtsmimiken getaggt, doch leider konnte man später beim prompten, die gewünschte Gesichtsmimik nicht abrufen. Mein Eindruck, civitai erstellt primär eine face Lora, und verpasst der Lora oft als default eine standartisierte Lippe, und nicht das Original.
Ich habe mal beides ausprobiert. Bei mir funktioniert die "manuell" erstelle Lora leider gar nicht. Das sieht nicht mal annähernd nach der Person aus. Mit der Rapid Version ist alles okay.
Info zum FLUX Training mit Tags als Caption:
Wie im Video erwähnt haben die Tests mit der LoRA, in der Tags verwendet worden sind (wossi86,1boy, glasses, beard,...), es nicht mehr ins Video geschafft. Scheint aber auch gut, wenn nicht sogar besser zu funktionieren. Das Thumbnail (Titelbild) ist auch damit entstanden. Ich finde das Modell ist dann doch deutlich flexibler als wenn man die lange Caption verwendend.
Danke!
Ich freue mich schon auf dein pony lora tutorial
Da ist es! Vielen Dank dafür.
Sehr gerne 🙂
Sehr gute Erklärung.
nice, bitte mehr davon
Danke
Nice, das mit Epochen hat sich mir bisher nicht so erschlossen
wobei man sagen muss, das DAS, was da ab 36.33 Minute gezeigt wird, nicht der Regelfall ist. Dort kommt man nur hin, wenn man eine Face Lora erstellt, und die Gatekeeper Funktion dich durch lässt. Die Gatekeeper Funktion (Türsteher ), ist aufgrund der strengen US Gesetze dort drinnen. In dem Moment, wo Bilder im Dataset sind, die über eine Face-Lora hinaus gehen, und den Körper zeigen - also für eine Bodyshape-Lora, dann bekommt man auf Civitai nach dem Training ein völlig anderes 3 Spaltenraster, links "1Girl"- Spalte, "1girl, looking at viewer, earrings, tension, solo, shirt" mit epochen Bildern, die mit Deinem Dataset von der weiblichen Lora-Anwärterin nichts zutun haben, in der Mitte die Gatekeeper-Spalte, wo der Text beginnt "fine art parody", also der Hinweis, das das Lora Training sabotiert wurde,
und in der rechten Spalte "1boy", also ein männliches Gegenstück zu Deinem weiblichen Dataset. Somit wird Dein so trainiertes Lora in allen Epochen auch jede Menge Bilder produzieren, wo aus der weiblichen Lora eine Transe geworden ist.
Den Gatekeeper gibt es nicht nur bei Civitai, ein anderer Deutscher, der allerdings auf Englisch moderiert, hat in seinem yt video "Easiest FLUX.1 LORA Training Guide - Full Workflow" ein Dataset hochgeladen, das ausschliesslich aus Ki generierten Bildern besteht, - das hat bei ihm geklappt. Bei MimicPC hab ich nach der Anleitung "Fast and EASY Flux LORA Training with AI-Toolkit and MimicPC" dasselbe Dataset, wie bei Civitai hochgeladen, und bin dann zu einer Lora gekommen, die manchmal Greisin ist, oft den Körper einer MuskelFrau hat, oder der Kopf erheblich zu klein zum Körper ist. Nur jedes 5 Bild, was generiert wurde, taugt was, weil es das Gesichtserkennungsprogramm erkennen würde. Hauptthema sollte deshalb sein, sein Lora Datenset am Gatekeeper vorbei zu bekommen.
Das sind aber schon ziemlich fragwürdige Unterstellungen....
Natürlich kann es, wie bei vielen AI Diensten sein, dass es gewisse Vorkehrungen, wie Blacklists für Wörter um kein "Mist" zu gestallten existieren. Aber, dass das Training hier verfälscht wird, schließe ich bisher aus. Werde mich aber natürlich weiter damit beschäftigen und sollte ich was finden, wird ein Video darüber entstehen.
Zu deinen Angeben hier und auch im anderen Kommentar habe ich Fragen, bzw eine Vermutung, warum du so stark abweichende Ergebnisse hast.
Bezogen auf "Fast and EASY Flux LORA Training with AI-Toolkit and MimicPC": Wenn du es dort nach der Anleitung machst, trainierst du es wohl nicht über Kohya GUI sonder über das "AI Toolkit", so erklärt der gute Mann es dort zumindest, auch wenn es dort Kohya_SS auch gibt. Dann ist es selbstverständlich, dass die Ergebnisse stark abweichen...
Wir haben bei Civit die Auswahl aus Kohya oder rapit. Und bei Kohya sind die Einstellungen vereinfacht. Ich hab Kohya für paar SDXL Tests auf meinen Rechner trainieren lassen und später mit Civit verglichen und die Ergebnisse sind recht gleich.
Zu deinen 3 Spalten bin ich mir nicht sicher, was du damit sagen möchtest. Die Test werden, wenn man die Prompt Felder leer lässt, zufällig ausgesucht. ZUFÄLLIG... da kann dann auch mal 1girl drin stehen als Prompt. Dies hat nichts mit deiner LoRA zu tun. Hier kann man auch selber was rein schreiben, wenn man seine LoRA z.B. auf Flexibilität angeht testen möchte, also verschiedene Styles, Kleidung oder auch Geschlecht.
❤❤❤❤❤
Sieht super aus!!! Kann man daraus ein LoRA für ComfyUI exportieren?
Hi Wossi :-) endlich - DANKE DANKE DANKE :-) ich nutze die Lora Funktion von CivitAI schon eine ganze Weile und habe im Grunde genommen gute Ergebnisse ohne zu wissen, was ich einstelle. FLUX sei es gedankt ;-) Die Einstellungen, die Du verwendest hast Du lediglich für ein Gesicht verwendet - aber wie ist es bei komplexeren Bildern. Insbesondere bei menschlichen Körpern ist das Übertrainieren flux passiert. Während die Kleidung noch top ausschaut sind Gesichter rauschig oder die Hand hängt am Bein :/ Hast Du dafür eine geeignete Einstellung parat?
Kannst du ein Tutorial Video machen, wie man Videos einen Untertitel hinzufügt? Wenn es möglich ist, auch die Ausgangssprache in andere Sprachen übersetzten, als Untertitel.
Kannst du bitte noch ein Video machen wie die aus der Lora Datei die Bilder generiert hast . Die Bilder sind wirklich sehr gut geworden . Viele Grüße
funktioniert Super, problem ist nur wenn man eine 2te person ins flux lädt, werden dann beide FLUX Models auf beide Charaktäre angewandt... kann man das ändern?
Das ist ziemlich cool. Aber eine Frage: Wie schaffst Du es bei der Bilderstellung mit der eigenen LORA wenn man mehrere Personen auf dem Bild hat? Die haben nämlich alle mein Gesicht *lol*
hab bisher denselben Bilderset bei mehreren Anbietern getestet, und immer unterschiedliche Ergebnisse bekommen. Bei Civitai hatte ich die unterschiedlichen Gesichtsmimiken getaggt, doch leider konnte man später beim prompten, die gewünschte Gesichtsmimik nicht abrufen. Mein Eindruck, civitai erstellt primär eine face Lora, und verpasst der Lora oft als default eine standartisierte Lippe, und nicht das Original.
Ich habe mal beides ausprobiert. Bei mir funktioniert die "manuell" erstelle Lora leider gar nicht. Das sieht nicht mal annähernd nach der Person aus. Mit der Rapid Version ist alles okay.
Peinlich. Cooler Channel, cooler Dude und noch nicht abonniert. Gleich mal geändert.✅
Danke dir 😅