ControlNet und gezielte Steuerung

Hier nutzt du ControlNet in ComfyUI, um Pose, Tiefe, Kanten und Komposition gezielt zu steuern. ControlNet ist eine der mächtigsten Erweiterungen für Stable Diffusion. Es erlaubt die Generierung anhand einer Vorlage zu steuern: eine Körperhaltung, eine Raumtiefe, die Konturen eines Objekts. Das Ergebnis folgt der Vorlage, der Stil kommt vom Modell und Prompt. Das ist etwas fundamental anderes als reine Texteingabe.

Was ControlNet macht

Ohne ControlNet entscheidet das Modell auf Basis des Prompts selbst wie es das Motiv anordnet. Mit ControlNet gibt man eine Struktur vor. Das Modell füllt diese Struktur mit dem gewünschten Stil aus.

Ein Beispiel: Man hat ein Foto einer Person in einer bestimmten Pose. ControlNet extrahiert das Skelett dieser Pose. Dann generiert man ein neues Bild mit einem anderen Prompt, etwa eine mittelalterliche Kriegerin. Die generierte Person übernimmt exakt die Pose aus dem Originalfoto.

Die wichtigsten ControlNet-Typen

ControlNet installieren

ControlNet benötigt zwei Dinge: den ComfyUI-Manager-Node für ControlNet und das passende Modell für den gewünschten Typ.

Stärke und Balance

Der "Apply ControlNet" Node hat einen Stärke-Parameter. Bei 1.0 folgt das Bild der Vorlage sehr genau, der Prompt hat weniger Einfluss. Bei 0.5 ist es eine Balance. Bei 0.3 bis 0.4 nimmt das Modell die Vorlage als Orientierung, weicht aber stärker ab.

Für den Einstieg empfehle ich mit einem Wert um 0.7 zu beginnen und dann je nach Ergebnis anzupassen. Zu hohe Werte machen das Bild oft steif und unnatürlich.