[Sammelthread] AI - Bildgenerierung (Stable Diffusion, Midjourney & Co)

@Keuleman Dann kannst mir ja sagen ob es besser ist immer vom Ausgangsbild auszugehen oder dem jeweils nächstliegenden Bild/Perspektive.
Beispielsweise bei der Rückenansicht werden ja teile neu dazuerfunden von der KI. Da wäre es also vernünftigen das neue Bild von der Rückansicht als Ausgansbild zu verwenden wenn ich die Kamera nur ein Stück schwenke aber immer noch teile von hinten zu sehen sind!?
 
Ok, ich habe mir noch einmal Gedanken zu dem BBOX-Prompt gemacht, den mein Refiner ausspuckt ^^.
Es hängt hier natürlich viel vom Modell ab, was ich in Ollama nutze, wie das Ergebnis ausfällt.

Von daher habe ich mir gedacht, bevor ich den Prompt als json von Hand editiere, werde ich bequem und habe mir eine Node erstellt ( halb vibe-coded, halb manuell) , die das Problem löst.

jsontobbox.webp

Das ist eine json to BBOX Node, die meinen Prompt, den ich als json erstellt habe, umwandelt. Dann kann ich diesen mit der "Create Bounding Boxes" Node verbinden, die es ja bereits in ComfyUI gibt (leider nur funktionsfähig mit Nodes 2.0).

Aber dann sieht das so aus:
jsontobbox_2.webp


Ich lese einmal die Infos aus (Play-Button an der View-String-Node am Ende) und sperre dann die json to BBOX Node. Dann kann ich alles nach Belieben anpassen, und am bekomme ich wieder einen json Prompt für MOSS-Image. Da es nun die MOSS-Image Layout Prompt Node gibt, die BBoxes ebenfalls in JSON umwandelt, wird das Ganze direkt wieder schön neu verpackt.

Das Ganze funktioniert recht simpel, und wenn man es darauf anlegt, sein Design zu kontrollieren, ist es ein guter Mix, um aus einem Refiner json Prompt nachträglich bequem einen neuen mit den passenden Koordinaten zu machen.

Aber meins wird es nicht werden, entweder nehme ich den json Prompt direkt vom Refiner oder bleibe bei einem klassischen Text-Prompt wie sonst auch (der lässt sich einfacher nachbearbeiten ^^).

Wer mag, findet hier mal die Logik, die ich ausgearbeitet habe (eine KI hat meine Schreibfehler dann mal glatt gezogen ^^).

Eventuell hat ja jemand Lust, damit zu experimentieren ^^

MOSS-IMAGE REGIONAL LAYOUT GENERATION & OUTPUT FORMAT
The entire final response must be formatted as a single, structured JSON object optimized for the MOSS-Image model. MOSS-Image uses layout-guided generation via coordinates and bounding boxes.

OUTPUT FORMAT RULES:
  • Output ONLY the raw JSON object. Do not wrap it in markdown code blocks like json ... . No introductions, no conversational filler, no explanations, no meta-commentary.
  • The JSON must follow the exact layout structure specified below.

COORDINATE SPACE (abs_centralized):
  • The coordinate system dynamically adapts to the target canvas resolution (e.g., 1024x1024, 1344x768, 1920x1080).
  • The absolute center of the image is ALWAYS (0,0).
  • You must calculate the exact boundaries based on the total width and height:
* X-axis (Width) ranges from -(width/2) to +(width/2).
* Y-axis (Height) ranges from -(height/2) to +(height/2).
- EXAMPLE for a standard 1024x1024 canvas:
* Absolute center: (0,0)
* Top-left corner: [-512, -512]
* Bottom-right corner: [512, 512]
* X-axis ranges from -512 (far left) to +512 (far right).
* Y-axis ranges from -512 (top) to +512 (bottom).

BOUNDING BOX LOGIC AND MATH RULES (CRITICAL):
1. ALWAYS CALCULATE BASED ON ACTUAL RESOLUTION GIVEN:
Before outputting, divide the user's canvas width and height by 2. Use those exact limits.
- For Landscape (e.g., 1344x768): X goes from -672 to +672, and Y goes from -384 to +384.
- For Square (e.g., 1024x1024): X goes from -512 to +512, and Y goes from -512 to +512.
- For Portrait (e.g., 768x1344): X goes from -384 to +384, and Y goes from -672 to +672.
2. STRICT VERTICAL ORDER [ymin, xmin, ymax, xmax]:
- ymin represents the TOP of the object. Because the top of the canvas is negative, ymin MUST ALWAYS be a lower (more negative or smaller) number than ymax.
- ymax represents the BOTTOM of the object (closer to the bottom edge, which is positive).
- NEVER invert this. Example for a standing center figure in 1344x768: [-340, -150, 360, 150] is CORRECT (starts at negative top, ends at positive bottom). [360, -180, -360, 180] is FATAL ERROR.
3. PREVENT OVERLAPPING:
Subjects in the foreground and objects in the background must have distinct X (horizontal) coordinate ranges if they are side-by-side. If a carriage is "far left behind", its X coordinates must end before the center character's X coordinates begin.

BOUNDING BOX FORMAT (yxyx):
  • Every bounding box array must strictly use the four-value sequence: [ymin, xmin, ymax, xmax].
  • Calculate the positions of the subjects based on the layout found in the reference sketch or user description.
  • If a text element/sign is requested, create a dedicated box for it, set the label to "text", and the caption to the exact word(s).

JSON FORMAT TO OUTPUT:
{
"summary": {
"caption": "Put the full expanded master prompt here. Construct it strictly according to the PROMPT CONSTRUCTION ORDER. This must be one continuous, highly detailed, visually dense English paragraph."
},
"items": [
{
"label": "Name or clear identifier of subject 1",
"caption": "Isolated, highly detailed prompt segment specifically for subject 1 (their identity anchor, clothing and coverage, specific pose, and action). ",
"bbox": [ymin, xmin, ymax, xmax]
},
{
"label": "Name or clear identifier of subject 2 or main prop",
"caption": "Isolated, highly detailed prompt segment specifically for subject 2 or the primary background/foreground element interacting with subject 1.",
"bbox": [ymin, xmin, ymax, xmax]
}
],
"bbox_format": "yxyx",
"bbox_coord_space": "abs_centralized"
}

Ist sicher nicht perfekt, aber ein Anfang ^^





Zu dem Thema "Generate Text" Node ich habe hier mal ein Test Aufbau gemacht:

GenerateTextTestwebp.png


Ich habe dann mal Qwen3.5 gegen Qwen3.8 27B und Gemma 4 12B antreten lassen.

Alle haben meinen selbstgebauten System-Prompt mit einem 12k-Fenster und einer Temperatur von 0,7 erhalten und sollten daraus einen neuen Prompt bauen:


Create an epic high detailed scene, cinematic photorealistic 8K wide angle, candid shot

Bondi Beach sunset

Maeve, an Irish 45-year-old woman, soft hourglass silhouette, 11-line abs, green eyes, red hair into a messy bun, a gold hair clip that holds the bun in place, a gold septum ring in her nose. She wears an orange and white neoprene wetsuit, uncovered arms and legs. A white and orange surfboard. Maeve surfs in a deep, hollow wave directly in the barrel („in the pipe“), the fingers of one hand glide through the water.

Zeitlich tun sie sich alle nichts – es dauert im Schnitt irgendwas zwischen 55 und 75 Sekunden (Gemma hatte nach ca. 20 Durchläufen auch mal Ausreißer von 120 bis 150 Sekunden).

Hier mal die Ergebnisse:
Qwen3.5 (Generate Text), hier musste ich das erstemal mit einem negativ Prompt nacharbeiten ^^:
TEST-GenerateTxT.webp



Image generated with moss_image_sft_bf16 via ComfyUI using the following settings:
Step 1 | Resolution: 1344x768 | seed: 1976, steps: 14, cfg: 3.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 1.0
Step 2 | Resolution: 2016x1152 (Upscaled x1.5) | seed: 1976, steps: 4, cfg: 1.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 0.6


A cinematic photorealistic 8K wide angle candid shot captures the dramatic atmosphere of Bondi Beach during a vibrant sunset, where the sky transitions from deep burnt orange to soft violet above the horizon reflecting off the churning ocean waves. In the immediate foreground, Maeve, a 45-year-old Irish woman with a soft hourglass silhouette, rides a powerful deep hollow wave directly inside the barrel, her body angled dynamically against the crashing water with intense focus and determination. Her vibrant red hair is pulled back into a messy bun secured by a delicate gold hair clip, contrasting sharply with a visible gold septum ring piercing her nose, while her striking green eyes are locked onto the path ahead with a look of serene concentration. She possesses a toned athletic build with clearly defined 11-line abs on her exposed torso, emphasizing her strength and endurance under the natural sunlight and wind. She wears a fitted orange and white neoprene wetsuit that clings realistically to her muscles, leaving her arms and legs completely uncovered to reveal tanned skin glistening with sea spray and natural texture, showing the subtle indentation of the fabric around her shoulders and thighs. She balances skillfully on a sleek white and orange surfboard cutting through the foam, positioned diagonally across the frame to create dynamic tension. One hand extends gracefully, fingers gliding smoothly through the water surface just above the crest, demonstrating perfect control within the tube while the other arm stabilizes her core against the pressure of the wave. The lighting casts long, warm shadows across the wet skin and textured fabric of the wetsuit, highlighting the water droplets suspended in the air and the sheen on her skin where the sun hits the curves of her body. The ocean water churns with white foam and translucent blue-green hues, creating a sense of motion and power around her legs and board, with individual bubbles and spray captured in mid-air. Shot on a 24mm wide-angle lens to emphasize the scale of the wave and the environment, the image maintains a shallow depth of field keeping Maeve sharp while slightly blurring the distant shoreline and sand to isolate the subject. High contrast, cinematic color grading, hyper-realistic skin pores, water refraction, and detailed fabric wrinkles render the scene with professional photography quality, capturing the ephemeral moment of the barrel ride with precision and clarity. The wind ripples the surface of the water around her, and the wetness on her skin reflects the ambient light, adding layers of realism to the composition. Every strand of hair and drop of water is rendered with microscopic detail, ensuring the scene feels alive and tangible.


Qwen3.8 28B:

TEST-QwenOllama.webp

Image generated with moss_image_sft_bf16 via ComfyUI using the following settings:
Step 1 | Resolution: 1344x768 | seed: 1976, steps: 14, cfg: 3.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 1.0
Step 2 | Resolution: 2016x1152 (Upscaled x1.5) | seed: 1976, steps: 4, cfg: 1.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 0.6


Cinematic photorealistic 8K wide-angle candid shot, 24mm focal length, golden-hour sunset at Bondi Beach Sydney, the sun dipping low behind the dark basalt rock formations and white-sand headland, painting the entire scene in molten amber and deep teal, the sky streaked with bands of tangerine, burnt sienna, and soft violet cloud edges, the wet sand and low-lying coastal scrub silhouetted against the glowing horizon. Maeve, a 45-year-old Irish woman with a soft hourglass silhouette, green eyes, and auburn-red hair swept into a messy high bun secured by a small gold hair clip, a thin gold septum ring catching the last light in her nose, is locked deep inside the barrel of a long, glassy, hollow wave at Bondi, the towering curl of whitewater coiling overhead and behind her, the translucent teal-green wall of the wave curving into a tight tube of churning water, her white-and-orange surfboard angled beneath her feet as she carves the inside face of the pipe, her body crouched and low over the board, arms and legs bare and exposed beneath the orange-and-white neoprene wetsuit, the fabric clinging naturally to her 11-line abs and the soft curve of her hourglass torso and hips, the material damp and glistening with salt spray, the orange panels catching the warm backlight and the white sections reflecting the amber glow from above, her left hand trailing behind with fingers pressed into the churning surf, the water parting around each finger as it slips through the glassy, backlit surface, droplets suspended mid-air in the golden air, the hollow wall of the wave wrapping over her in a seamless ribbon of translucent aquamarine and emerald, the deep blue-green ocean floor faintly visible through the wave's glassy body, the wave's crest foaming into a dense white-cream spray at the far end of the barrel, the spray backlit into a luminous mist. In the background, the iconic rocky headland of Bondi's northern promontory silhouetted against the dying sun, the white-sand beach curving away, distant low-rise coastal architecture and the faint blue-green of the Pacific stretching to the horizon, the salt-air haze softening the distant headland. The wetsuit fabric drapes with natural gravity over her rounded shoulders and the soft set of her chest and waist, the neoprene slightly textured and worn at the seams, the orange panels saturated and the white sections catching rim-light from the setting sun, the fabric moving with the flex of her crouched surfing stance, her red hair escaping the bun in loose, wind-tousled strands across her temples and neck, the gold clip catching a pinpoint of reflected sunset. Her green eyes are focused and intent, her jaw set, the salt-crusted skin of her exposed forearms and legs glistening with spray, the water at her ankles rippling into a small wake behind the board. The entire frame is lit by the low, warm, directional sunset from behind and above the wave, creating deep teal shadows inside the barrel and a brilliant golden rim-light on every edge of her body, the wetsuit, and the surfboard, the air thick with salt spray and the faint haze of a coastal evening, the lens rendering the scene with crisp 8K photorealistic detail, natural skin texture, realistic fabric behavior, and the deep, glassy translucency of the ocean, depth of field keeping Maeve razor-sharp while the distant headland and sky soften into atmospheric perspective, the whole image feeling like a single decisive frame from a 24mm cinema camera tracking her through the pipe at the exact moment the wave peaks overhead.


Gemma4 12B:
TEST-GemmaOllama.webp



Image generated with moss_image_sft_bf16 via ComfyUI using the following settings:
Step 1 | Resolution: 1344x768 | seed: 1976, steps: 14, cfg: 3.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 1.0
Step 2 | Resolution: 2016x1152 (Upscaled x1.5) | seed: 1976, steps: 4, cfg: 1.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 0.6


An epic, expansive cinematic scene of Bondi Beach during a dramatic sunset, where the sky is painted in a rich, saturated palette of burnt orange, deep violet, and shimmering gold, reflecting perfectly onto the churning, rhythmic surface of the Pacific Ocean. In the foreground and center of the composition, Maeve, a 45-year-old Irish woman with a soft hourglass silhouette and beautifully defined 11-line abs, is captured in a candid, high-action moment of pure athleticism as she surfs inside the deep, hollow barrel of a massive, curling wave. Her vibrant red hair is swept up into a textured messy bun, held firmly in place by a small, polished gold hair clip, and a delicate gold septum ring glints in her nose as she navigates the water with grace. She is dressed in a high-quality orange and white neoprene wetsuit, with the sleeves and legs cut off to reveal her toned, muscular arms and legs, the fabric showing realistic organic creases and a wet, matte sheen from the spray. She balances with poise on a sleek white and orange surfboard that carves a clean, powerful line through the turquoise water, with the lip of the wave curling overhead to create a translucent, emerald-tinted ceiling of water that frames her body. One of her hands is extended forward, the fingers splayed and gliding effortlessly through the water, creating delicate ripples and a trail of crystalline spray that catches the light. The surrounding wave is a masterpiece of physical dynamics, with exploding white foam, turbulent water textures, and individual beads of spray suspended in mid-air by the velocity of the surf. Her green eyes are filled with focused determination, and her skin glistens with a thin layer of salt water, highlighting the micro-textures of her face, the slight pressure of the water against her chest, and the ripple of her muscles as she leans into the curve. The composition is a wide-angle cinematic photorealistic 8K shot, utilizing a 35mm lens to capture the vast scale of the environment while maintaining the intimate, raw detail of Maeve's expression and the surrounding ocean's power. The lighting is dominated by the warm, directional glow of the setting sun, casting long, natural shadows and creating high-contrast highlights on the water’s surface and the curves of her body. The color grading enhances the golden hour atmosphere, blending the warm tones of the sun with the cool, deep blues of the ocean, creating a sense of atmospheric depth. The perspective is a dynamic candid angle, capturing the raw energy of the surf, with a perfect depth of field that keeps Maeve and her surfboard in sharp, tactile focus against the majestic, slightly blurred backdrop of the crashing waves and the distant, hazy coastline of Bondi.

Als Resümee würde ich sagen, dass alle gute Arbeit machen und eine Basis liefern, die sich sehen lassen kann. Sie liefern auf jeden Fall eine Basis, auf der man aufsetzen und weitere Anpassungen vornehmen kann.

Dennoch werde ich Gemma4 weitherin nur für open WebUI für Interaktive Assitenten nutzen, da ist die Kreativität für mich besser aufgehoben.


Nun zu MOSS-Image
Bei mir ist die erste Begeisterung, was MOSS-Image angeht, etwas verflogen, es wird bei mir wohl nur die Nummer 2 bleiben ;) Es ist ein ziemlich gutes Modell, das man mal eben schnell laden kann, wenn man kurz etwas visualisieren möchte. Dafür ist es echt spitze! Leider habe ich das Problem, dass oft die Farben übersteuern, und es gibt noch ein paar andere kleine Dinge.

KREA2 bietet mir persönlich da mehr, auch wenn es das System etwas mehr fordert ^^

Wobei ich noch testen werde, ein schnelles Bild mit MOSS aufzubauen und es dann durch Krea2 zu jagen ^^ Oder MOSS-Image auch mal als Refiner für ein KREA2-Bild zu nutzen.
 
  • Gefällt mir
Reaktionen: MuhSagtDieKuh
Üblicherweise kann man mit etwas Absenkung der CFG evtl. etwas Übersättigung wegnehmen. Hast Du das mal probiert? Aber du hast schon ne Turbo Lora drin oder? Hattest Du ein generelles Systemprompt verwendet oder ein auf das Modell zugeschnittenes? Bzgl. des Prompts zb. beim letzten, die "11 line abs" und dann der neopren Anzug, das schließt sich ja eigtl relativ klar aus :D Hast Du diese SLG (Skip Layer Guidance) Node auch benutzt, wie vorgesehen (geht aber auch nur mit cfg über 1 afaik)? btw Leute benutzen manchmal sowas wie cfg 1.2 um dann noch negative benutzen zu können, falls das noch nicht bekannt ist.

News:

Neues Video Modell H3Fast Omni (basierend auf H3) (Link zu Modellen)
Neues Bild Modell (FIBO) mit Edit Funktion
Neue Turbo Lora für MOSS (DMD2)


Edit: @CountSero weiß noch nicht, woran es liegt, aber Dein Prompt gibt bei mir nicht diesen Airbrush mäßigen Stil. Das wird bei mir Foto. (ohne Lora base Model) Edit 2: wenn du ne Turbo LORA UND cfg3 hast, dann könnte es daran liegen.
 
Zuletzt bearbeitet:
Ja, beim "Angle" ändern erfindet die KI natürlich die Sachen neu, die in dem Bild nicht drin sind. 360 Grad Shots Umgebung habe ich damit glaube nicht gemacht ABER leichte Perspektivenänderungen reichen ja schon, um Szenen "lebendiger" zu machen (zumindest für LTX 2.3 Director... bei H3 war dann Szenen-Perspektivenänderung eigentlich egal). Habe dann das Ding öfter genommen für Character Sheets, wobei ich da gegen Ende einfach nen normales Bild-Edit Workflow genommen hab (Flux2Schnell) und dann halt "show character from rear" und so.

Eine Szene im Metal Film habe ich hergenommen und Qwen Angle extrem "ausprobiert":
22:57 im Film:

Warping durch LTX 2.3 aber jede Menge Keyframes, alle aus dem Qwen Angle Workflow. Das waren meine Versuche, LTX mit vielen Keyframes "lebendiger" wirken zu lassen.
 
  • Gefällt mir
Reaktionen: samuelclemens
@MechanimaL
Also im Step 1 vor dem Refiner bin ich noch bei CFG3 und dann beim zweiten Step bin ich dann nur noch bei CFG1

Bei KREA2 sieht es dann bei mir auch anders aus, ist der erste der drei Prompts.

TEST-GenerateTxT-KREA.webp



Keine Ahnung ^^ liegt wohl an meinem verkorksten Ansatz mit meinem MOSS-Image Setup
 
Zuletzt bearbeitet:
@Keuleman Welche Workflows oder Nodes würdest mit MinimaxH3 empfehlen wenn es um präzise gesteuerte Kamerafahrten geht?
Gibt's da was visuelles wie das Anglenode für Perspektive?
Ich würde mir was wünschen das an 3D Animationstools wie Blender oder so angelehnt ist.
 
(Prompting)
(hier könnte einiges an Info drinstecken, was für Dich relevant ist, auch wenn die exakten workflows und Zusammenstellungen nicht gratis sind)
 
Zuletzt bearbeitet:
  • Gefällt mir
Reaktionen: CountSero und samuelclemens
Mjo, ich habe die "festgelegtesten Kamerafahrten" über Keyframes in LTX gelöst. In H3 habe ich gern mit "shots" gearbeitet ("Sek. 1-4 Nahaufnahme Heldin, Kamera pant langsam nach rechts, Sek. 5-8 Wide Shot Heldin..."). Habe auch workflows gesehen, mit denen man den Flug genau planen kann aber das war mir den Aufwand nicht wert, ich wollte nur, dass es langsam "lebendiger" wirkt als zu Beginn meines Films, wo immer eine Einstellung war. Wirkte halt sehr "Powerpoint und Adventure-Game".

Ach so, workflows tatsächlich immer die "Standard" H3 ref2vid, LTX habe ich 2.3 genommen und da dann mit director node... so hieß die glaub.

___

Edit: Noch was anderes... überlege gerade, Flux runter zu werfen (sämtliche Derivate, habe noch Flux 1 / 2 Schnell Klein etc Kram). Der einzige noch gebliebene Einsatzzweck: Outpainting und Inpainting. Aber auch da wird es doch was geben (besonders Outpainting, also "Bild links/rechts/oben/unten" erweitern), das sollte doch eine leichte Übung sein?
Hat da einer einen heißen QWEN 2.1/QWEN Edit 2511/2509 Tipp für mich oder gar KREA2 oder so?
 
Zuletzt bearbeitet:
CountSero schrieb:
@MechanimaL
Also im Step 1 vor dem Refiner bin ich noch bei CFG3 und dann beim zweiten Step bin ich dann nur noch bei CFG1
musst mal selbst testen, bei turbo Lora Verwendung auf jedenfall mal mit cfg1 probieren.. und vielleicht das Medium mal noch explizit an den Anfang des Prompts setzen (Photograph). Ich hatte aber gestern auch kurz das Problem, dieser Übersättigung/Kontrastierung usw., war nach einem Neustart von comfyui aber wieder weg.

Das Base-Modell von Moss hat manchmal auch seinen Reiz, ist eben nicht poliert, d.h. auch "ehrlicher" und neigt zu mehr Fehlern. Die Turbo LORA korrigiert diese Fehler aber z.T. und gleichzeitig ist es entsprechend schneller, kann auch ne Option sein, statt des sft-Modells. Generell erinnert mich MOSS etwas an SDXL, aber auch im positiven Sinne ^^ Man kann auch recht einfach mit Inpainting Anatomie oder andere Probleme reparieren, die doch häufig auftreten.
 
  • Gefällt mir
Reaktionen: CountSero
MechanimaL schrieb:
Edit: @CountSero weiß noch nicht, woran es liegt, aber Dein Prompt gibt bei mir nicht diesen Airbrush mäßigen Stil. Das wird bei mir Foto. (ohne Lora base Model) Edit 2: wenn du ne Turbo LORA UND cfg3 hast, dann könnte es daran liegen.

Es ist wohl eine Mischung aus der 8-Step-LoRA und der Auflösung. Wenn die Auflösung größer wird, bekomme ich bei mir seltsamerweise immer einen Ticken mehr Farbe ^^.

Und das ist egal, ob ich die Base/SFT nutze und ob BF16 oder INT8.

Auch denke ich, dass es wohl Unterschiede zwischen Nvidia- und AMD-Karten gibt.

Ich merke es ja schon, wenn ich das Modell mit einem compute_weight von Default, FP16 oder BF16 lade.
 
Base mit Turbo Lora
1792576231308.png


Sft mit Turbo
1792577602354.png

1792579019186.png
Sft ohne Turbo
1792580560892.png


Die Größte "Poliertheit" und die wenigesten Fehler hatte ich mit sft+lora. Ist halt immer die Frage wie sehr man das will. War das dritte Prompt von der Reihe oben. Teilweise habe ich ein paar Fehler schon ausgemerzt, aber da geht natürlich immer noch was, nur jetzt lasse ich es mal zum optischen Vergleichen da.

Da inpainting gut funktioniert hat, könnte auch outpainting gut gehen, müsste man mal testen ;) @Keuleman - von den Flux Modellen ging das mit Flux Fill gut (brauchte besondere Settings, aber benutze ich sogar heute manchmal noch).
 
Ich befürchte fast, ich muss das echt auch mal weiter drauf lassen :-D Ich habe selbst noch nix alternatives Anständiges gefunden für Outpainting.
 
MechanimaL schrieb:
Die Größte "Poliertheit" und die wenigesten Fehler hatte ich mit sft+lora. Ist halt immer die Frage wie sehr man das will. War das dritte Prompt von der Reihe oben. Teilweise habe ich ein paar Fehler schon ausgemerzt, aber da geht natürlich immer noch was, nur jetzt lasse ich es mal zum optischen Vergleichen da.

Gut das nutze ich ich Moment ja auch, ich muss mal schauen was ich mit MOSS-Image mache oder was bei mir falsch läuft ^^

Und ja die Prompt waren alle roh ohne nacharbeiten, die kamen ja alle aus dem Vergleich zwischen den Genrate Text mit dem Clip von MOSS, Qwen 3.8 und Gemma4.

Ich habe hier den LLMs ja freie Hand gelassen was zu bauen und habe das dann einfach in den Workflow gejagt.

Mal sehen ^^ evtl. bin ich auch übersättigt was COmfyUI angeht ^^
 
@Keuleman Ich hätt da noch ne frage zu den Kamerafahrten die du ja mit einzelnen Referenzbildern in deinem Metal Video gemacht hast. Die wiederum ja mit dem Angletool angefertigt wurden.
Soweit ist mir der Prozess klar, aber das sind ja nur Momentaufnahmen aus den jeweiligen Perspektiven.
Wie bekomme ich da Bewegung/Handlung rein!?
Also zb mein Charakter läuft eine Straße entlang, die Kamera folgt ihm zunächst am Boden, man sieht die einzelnen Schritte. Während er weiterläuft fährt die Kamera langsam weiter hoch bis zum Gesicht.
In dem Moment dreht er sich blitzschnell um, die Kamera folgt jetzt seinem Blick zum Gegner im Schatten aus der third Person Perspektive.
Der Angriff erfolgt dann in der nächsten Szene, wieder third Person, aber aus Sicht des Gegners. Man sieht aber nur undeutliche Schemen

Ich würde gern Kamerawinkel und Ablauf genau steuern können.
Das ist wichtig da der twist, wer denn nun der Gegner ist erst am ende aufgelöst wird.
 
da war auch ein Zoom auf Gesicht in dem Video... erstes Frame "Gesamtaufnahme Heldin am Feuer". Dann gibt man dem Node "Text", was passiert ("Kamera zoomt blitzschnell rein"). Dann das nächste Keyframe war "Augenpartie der Heldin".

Im Video ab 23:11!

Sonst bei H3:
2 Referenzbilder für H3: "Heldin kommt rein, ref_image_1 ist die Szene. Dann dreht sich die Kamera hinter die Heldin und zeigt ref_image_2". 01:02:36 ist im Film so ein Beispiel.
 
  • Gefällt mir
Reaktionen: samuelclemens
@Keuleman Du meinst ich soll die Keyframes alle separat erstellen und nicht aus einer einzigen Aufnahme die lediglich verschiedene Positionen und Winkel der Kamera zeigen innerhalb des moments?
Wenn mein Charakter zum beispiel den Gegner bemerkt ist er ja schon ein paar Meter weiter gelaufen. Das sieht man ja an der Umgebung.
 
Ich habe heute meinen System-Prompt für den Refiner noch einmal überarbeitet und die Vorgabe für den Prompt etwas angepasst:

Create an epic, high-detailed scene, cinematic, photorealistic, 8K, wide angle, candid shot.

Bondi Beach sunset, but no bright warm colors.

Maeve, an Irish 45-year-old woman, soft hourglass silhouette, 11-line abs, green eyes, red hair into a messy bun, a gold hair clip that holds the bun in place, a gold septum ring in her nose. She wears an orange and white neoprene wetsuit, uncovered arms and legs. A white and orange surfboard. Maeve surfs in a deep, hollow wave directly in the barrel („in the pipe“), the fingers of one hand glide through the water.
Surfer.webp


Image generated with moss_image_sft_bf16 via ComfyUI using the following settings:
Step 1 | Resolution: 1344x768 | seed: 1976, steps: 8, cfg: 1.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 1.0
Step 2 | Resolution: 2016x1152 (Upscaled x1.5) | seed: 1976, steps: 4, cfg: 1.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 0.6


Ich finde, durch die gedämpften Farben hat es eine bessere Wirkung
 
CountSero schrieb:
Ich habe heute meinen System-Prompt für den Refiner noch einmal überarbeitet und die Vorgabe für den Prompt etwas angepasst:
Ja das ging mir jetzt vorhin auch durch den Kopf, das mal mit einem etwas angepassten Prompt nochmal zu probieren. Hatte ja schon gefragt, ob Du ein MOSS System Prompt oder allgemeins für den Enhancer genommen hattest. Da waren z.T. noch Wiederholungen und ich fände es eher als Analog Foto schön, statt irgendwie künstlich gepimptes Bild. Wobei ich grade die Farben mit Deinem Prompt bei manchen sehr schön fand. Das verlief von rot/orange töne in blau/grüntöne zum Teil. Aber vielleicht too much, um noch realistisch zu wirken ^^

Btw: vll auch eine Szene, wo man die Anordnung sehr gut findet mit dem Bbox-System vorgeben. Das ist dann viel effizienteres "seed-hunting", wenn man weiß, dass schonmal die Grundkomposition schonmal gut ist.
Ergänzung ()

CountSero schrieb:
Ich finde, durch die gedämpften Farben hat es eine bessere Wirkung
sieht echter aus farblich; nur ein paar Teile (WElle über ihr) sind vll etwas zu gleichmäßig für Realismus
 
Zuletzt bearbeitet:
Ja, das stimmt, ist aber auch so aus dem Refiner gekommen. Ich arbeite gerade immer noch dran und mache Fine-Tuning. Ich habe den Output beschränkt und die Temp von 0,7 auf 0,5 gesenkt, außerdem habe ich versucht, das automatische Weighting zu verbessern.

Ich teste halt gerade aus, was ich noch finetunen muss, damit es grundsätzlich einfach auch so genommen werden könnte. Weil das wäre dann die beste Basis für einen Prompt den man anpassen kann.

Das sind die ersten Ergebnisse einmal mit und einmal ohne warme Farben einmal krea2 und einmal MOSS-Image:

Kalt KREA2
surf cold.webp

Image generated with krea2_turbo_fp8_scaled via ComfyUI using the following settings:
Step 1 | Resolution: 1344x768 | seed: 1976, steps: 8, cfg: 1.0, sampler: exp_heun_2_x0_sde, scheduler: sgm_uniform, denoise: 1.0
Step 2 | Resolution: 2016x1152 (Upscaled x1.5) | seed: 1976, steps: 4, cfg: 1.0, sampler: exp_heun_2_x0_sde, scheduler: sgm_uniform, denoise: 0.25


Kalt MOSS-Image

MOSS -kalt.webp

Image generated with moss_image_sft_bf16 via ComfyUI using the following settings:
Step 1 | Resolution: 1344x768 | seed: 1976, steps: 8, cfg: 3.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 1.0
Step 2 | Resolution: 2016x1152 (Upscaled x1.5) | seed: 1976, steps: 4, cfg: 1.0, sampler: dpmpp_2m_sde_heun_gpu, scheduler: sgm_uniform, denoise: 0.6


Bondi Beach at sunset, rendered in a sophisticated and moody cool-toned palette of deep cobalt, indigo, and silver, completely devoid of warm oranges or yellows. The global environment captures the vast, rhythmic ocean, with the foreground dominated by the churning, powerful surface of a massive, hollow wave and the background showcasing the distant, sharp coastline under a twilight sky. The overall composition is a dynamic, candid action shot, capturing the peak of a surfing moment from a low, immersive perspective that places the viewer right in the heart of the water. Captured with an analog Leica, (wide-angle 24mm lens:1.1), the scene utilizes a deep depth of field, ensuring that every individual ripple of the water, the intricate patterns of the spray, and the distant shoreline remain in crisp, sharp focus. The primary subject is Maeve, an estimated 45-year-old Irish woman (age:1.1), (fair skin tone:1.1), (vibrant red hair:1.1) styled into a messy bun and secured by a (gold hair clip:1.1), (piercing green eyes:1.1), (defined facial structure:1.1), (soft hourglass silhouette:1.1), (visible 11-line abs:1.2). She is dressed in a (textured orange and white neoprene wetsuit:1.1) that drapes realistically over her torso with soft, organic creases and natural folds, leaving her arms and legs completely uncovered to reveal her athletic physique. Maeve is captured in the middle of a powerful action, (surfing in a deep, hollow barrel wave:1.4) directly in the "pipe," her body leaning into the curve of the water with athletic grace and determination. Her torso is tilted forward, her weight distributed toward the front of the board to maintain balance. The (fingers of her leading hand:1.2) glide through the water's surface, slicing through the liquid with high physical fidelity, creating tiny, delicate ripples and a sense of fluid motion. The (white and orange surfboard:1.1) is positioned beneath her, cutting a clean line through the water. Her skin is rendered with (lifelike textures:1.1), showing (micro-droplets of seawater:1.2) clinging to her shoulders and face, with (realistic skin indentation:1.2) visible where the water pressure hits her leading arm. The water features (frothy white foam:1.3), (crystalline spray:1.3), and (smooth neoprene texture:1.1), with the surface of the water showing (dynamic liquid physics:1.2) as it curls over the top of the barrel. The lighting is (atmospheric sunset light:1.1) but filtered through a cool color grading of cyan and violet. The final rendering is a (photorealistic analog shot:1.2) with subtle film grain and professional clarity.

Warm KREA2
surf warm.webp

Image generated with krea2_turbo_fp8_scaled via ComfyUI using the following settings:
Step 1 | Resolution: 1344x768 | seed: 1976, steps: 8, cfg: 1.0, sampler: exp_heun_2_x0_sde, scheduler: sgm_uniform, denoise: 1.0
Step 2 | Resolution: 2016x1152 (Upscaled x1.5) | seed: 1976, steps: 4, cfg: 1.0, sampler: exp_heun_2_x0_sde, scheduler: sgm_uniform, denoise: 0.25


Kalt MOSS-Image
MOSS -warm.webp

Image generated with krea2_turbo_fp8_scaled via ComfyUI using the following settings:
Step 1 | Resolution: 1344x768 | seed: 1976, steps: 8, cfg: 1.0, sampler: exp_heun_2_x0_sde, scheduler: sgm_uniform, denoise: 1.0
Step 2 | Resolution: 2016x1152 (Upscaled x1.5) | seed: 1976, steps: 4, cfg: 1.0, sampler: exp_heun_2_x0_sde, scheduler: sgm_uniform, denoise: 0.25


Bondi Beach at sunset, a vast and majestic Pacific Ocean landscape with the iconic Sydney coastline visible in the far distance, foreground and background layout featuring a massive, towering breaking wave that dominates the frame, overall epic and dynamic composition, a candid and natural shot capturing a moment of pure motion, wide-angle perspective, analog Leica, 24mm lens, Maeve, an estimated 45-year-old Irish woman with a soft hourglass silhouette and (11-line abs:1.15), striking green eyes, and vibrant red hair styled into a messy bun held by a (gold hair clip:1.1), a (gold septum ring:1.1) glinting in her nose, wearing a (textured orange and white neoprene wetsuit:1.2) that drapes realistically over her physique with her arms and legs left uncovered to reveal her wet skin, (surfing in a deep, hollow barrel wave:1.4) directly "in the pipe," her body leaning into the water's curve with her torso slightly tilted forward, the (fingers of one hand:1.1) spread wide and (gliding through the churning water:1.3) with (visible ripples:1.2) and tiny splashes, (realistic skin textures:1.2) showing the fine pores and (water droplets:1.1) clinging to her face and torso, (realistic body deformation:1.3) where the heavy water pressure creates a slight indentation on her shoulder and waist, balancing perfectly on a (white and orange surfboard:1.1) that cuts through the surface, (frothy white foam:1.2) and (deep turquoise water textures:1.2) surrounding her, (golden hour glow:1.2) from the setting sun casting a warm radiance across the entire scene, (backlit highlights:1.2) on the splashing spray and the crest of the wave, a color palette of (warm amber and orange:1.2) contrasting with (deep oceanic blues:1.2) and the white of the foam, (deep depth of field:1.2) ensuring that the crashing waves in the background and the intricate foam in the foreground remain sharp and clear, (photorealistic analog Leica shot:1.3) with high visual density, fine grain, and professional cinematic lighting.

Also wenn ich das so sehe bringt mir KREA2 die Bilder die mich mehr ansprechen ^^
 
Zurück
Oben