Bildgenerierungsmodelle
Für einen ruhigeren Moment zwischendurch: Das Café des Jugendzentrums braucht ein Motiv für sein Plakat.
„Eine rote Keramiktasse auf einem Holztisch. Morgenlicht von links, ruhiger Hintergrund, keine Schrift.“
Ein Bildgenerierungsmodell erzeugt daraus Bilddaten. Die Anwendung zeigt das Bild an. Für „Entferne nur die Tasse“ gibt sie anschließend Bild und Änderungsauftrag gemeinsam mit.
Was das Modell dabei leistet
Im Training lernt das Modell Zusammenhänge zwischen Beschreibungen und Bildinhalten: Formen, Materialien und Licht. Daraus bildet es neue Motive. Verfahren wie Diffusion entwickeln die Darstellung schrittweise aus Rauschen. Die interne Technik hängt vom Modell ab.
Text + optionales Bild → Bildmodell → Bilddatei
Eine unterstützte Maske kann den Bereich markieren, den wir verändern möchten.