ControlNet ist eine Erweiterung für Bildmodelle, mit der sich eine Vorlage für Haltung, Umriss, Kanten oder Tiefe vorgeben lässt. Das erzeugte Bild folgt dann dieser Vorlage, während Motiv und Stil aus dem Prompt kommen.
- ControlNet
Eine Erweiterung für Bildmodelle, die eine Vorlage für Haltung, Umriss oder Tiefe vorgibt.
Beispiel: „Mit ControlNet stand die Figur in genau der Haltung der Strichzeichnung.“Übliche Vorlagen: ein Strichgerüst für die Körperhaltung, eine Kantenzeichnung, eine Tiefenkarte, eine Umrissfläche. Jede davon steuert einen anderen Aspekt.
Eingesetzt wird die Erweiterung vor allem zusammen mit offenen Bildmodellen, siehe Stable Diffusion.
Wofür das in der Praxis gebraucht wird
Für alles, wo die Anordnung feststeht. Eine Figur in einer bestimmten Haltung, ein Produkt in einer vorgegebenen Perspektive, eine Szene nach einem Storyboard: Mit einem Prompt allein ist das kaum zu treffen, mit einer Vorlage schon beim ersten Versuch.
Warum es die Arbeitsweise verändert
Weil es die Reihenfolge umdreht. Statt zu beschreiben und zu hoffen, zeichnet man grob vor und lässt ausarbeiten. Für Gestalter ist das der Zugang, der zu ihrer Arbeitsweise passt, und einer der Gründe, warum offene Bildmodelle in Gestaltungsabteilungen überhaupt eingesetzt werden.
Was es voraussetzt
Eigenen Betrieb oder eine Oberfläche, die es unterstützt. Als Erweiterung gehört es in die Werkzeugketten rund um offene Modelle; in den geschlossenen Diensten gibt es ähnliche Funktionen unter anderen Namen und mit weniger Einstellmöglichkeiten.
Was die Erweiterung voraussetzt
Eine Vorlage, die man erst herstellen muss. Strichgerüst, Kantenbild oder Tiefenkarte entstehen aus einer Skizze oder aus einem vorhandenen Foto; dieser Zwischenschritt ist der eigentliche Aufwand und lohnt bei Bildreihen.