Stable Diffusion : die Familie, die die lokale Bildgenerierung begründet hat

Stable Diffusion hat die auf der eigenen Maschine ausgeführte Bildgenerierung demokratisiert und die gängigen Praktiken hervorgebracht: Checkpoints, LoRA, ControlNet, Bild zu Bild, Inpainting, ComfyUI. Was die Familie ist, warum ihre alten Generationen noch dienen, und wo man ihre Quellen liest.

Stable Diffusion ist die Modellfamilie von Stability AI, die die lokale Bildgenerierung demokratisiert hat: Ihr Ökosystem hat die Checkpoints, die LoRA, ControlNet, Bild zu Bild, die Retusche nach Zone und die ComfyUI-Workflows hervorgebracht. Es ist kein einzelnes Modell, sondern mehrere Generationen, mit unterschiedlichen Architekturen, Fähigkeiten und Lizenzen; die alten werden dank des um sie herum gebauten Ökosystems weiter genutzt. Bei Axiris ist Stable Diffusion die Familie, über die man die Operationen einer Diffusionspipeline konkret versteht, auch wenn die Produktion auf neueren Engines läuft.

Die Gründerfamilie der lokalen Generierung

Stable Diffusion hat eine wesentliche Rolle bei der Demokratisierung der auf der eigenen Maschine ausgeführten Bildgenerierung gespielt. Sein Ökosystem hat heute gängige Praktiken hervorgebracht oder populär gemacht: die Checkpoints, die LoRA, ControlNet, Bild zu Bild, die Retusche nach Zone (Inpainting), die lokalen Oberflächen, die ComfyUI-Workflows, die abgeleiteten Modelle.

Ein grosser Teil des Vokabulars, das man noch für Bildmodelle verwendet, kommt von dort.

Mehrere Generationen

Stable Diffusion ist kein einzelnes Modell. Mehrere Generationen und Varianten wurden von Stability AI veröffentlicht, mit unterschiedlichen Architekturen, Fähigkeiten und Lizenzen: Man liest die Lizenz des Modells, das man nutzt, nicht die der Familie (Lizenzen der KI-Modelle).

Die alten Generationen werden in bestimmten Workflows weiter genutzt, dank des beträchtlichen Ökosystems, das um sie herum gebaut wurde: eine sehr grosse Zahl abgeleiteter Modelle, LoRA und Steuerungswerkzeuge, die für neuere Familien noch nicht existieren, oder nicht im selben Mass.

Stable Diffusion und die LoRA

Das Stable-Diffusion-Ökosystem hat die Personalisierung der Modelle durch LoRA weitgehend populär gemacht: ein Modell um einen Stil, eine Figur, eine Ästhetik, ein Motiv spezialisieren, ohne es vollständig neu zu trainieren. Was ein LoRA ist und wann es dient: LoRA: ein Modell spezialisieren. Wie man eines baut, das in der Produktion hält: LoRA-Workflow.

Stable Diffusion und ComfyUI

ComfyUI erlaubt, die verschiedenen Generationen von Stable Diffusion in vollständig anpassbaren Workflows zu nutzen. Seine Node-Architektur macht die Operationen einer Diffusionspipeline sehr konkret: das Modell laden, den Text encodieren, sampeln, decodieren, ein LoRA anwenden, per ControlNet führen. Oft lernt man an dieser Familie, einen Graphen zu lesen: Die Nodes in ComfyUI.

Stable Diffusion bei Axiris

Unsere Produktion läuft heute auf neueren Engines: Die Modelle des Moments sagt, welche, wofür und seit wann. Stable Diffusion bleibt die Familie, über die man versteht, was ein Diffusionsmodell tut, und eine ernsthafte Option, wenn ein Projekt von einem Ökosystem von LoRA oder Steuerungen abhängt, das nur sie besitzt. Die Wahl trifft man nach der Arbeit, nicht nach dem Alter des Modells: Wie wählt man ein KI-Bildmodell?.

Offizielle Quellen

Stability AI: Bildmodelle · Stability AI · Offizielle Organisation auf Hugging Face

Kontaktanfrage: ein erstes Gespräch geschenkt, unverbindlich. Jede Praxis ist anders, und indem wir Ihnen zuhören, schlagen wir vor, was zu Ihnen passt.