Modelli IA per la creazione di immagini

LoRA: specializzare un modello per tenere uno stile o un personaggio

Un LoRA adatta il comportamento di un modello senza riaddestrarlo: uno stile, un personaggio, una materia, un'identità visiva. Cos'è, da cosa dipende, quando serve (la continuità di una serie, di un marchio) e cosa non sostituisce.

Un LoRA è un metodo che adatta il comportamento di un modello di immagine senza riaddestrare tutti i suoi parametri: un piccolo file, addestrato su un lotto di immagini scelte, che insegna al modello uno stile, un personaggio, una materia o un'identità visiva. Non è un motore autonomo: dipende dal modello di base per il quale è stato addestrato. Per un creativo, serve soprattutto alla continuità: ritrovare la stessa estetica o lo stesso personaggio su un'intera serie senza ripartire da zero; fa tenere un'identità, non sostituisce la direzione artistica.

Cos'è un LoRA?

Un LoRA (Low-Rank Adaptation) è un metodo che adatta il comportamento di un modello senza riaddestrare l'insieme dei suoi parametri. Il risultato è un file leggero che si aggiunge al modello di base e orienta ciò che produce.

Nella creazione di immagini, un LoRA serve a introdurre o rinforzare una caratteristica: uno stile, un personaggio, una materia, un'estetica, un abito, una famiglia visiva, a volte un comportamento particolare del modello.

Questa pagina dice cos'è un LoRA e quando serve. Come se ne costruisce uno che tiene in produzione (il lotto di immagini, le didascalie, i test) è in Workflow LoRA.

Un LoRA dipende dal modello di base

Un LoRA non è un motore autonomo. È addestrato per un'architettura o una famiglia precisa, e funziona solo con quella: un LoRA per una generazione di Stable Diffusion non si applica a FLUX, e viceversa.

Prima di usarne uno, bisogna quindi conoscere il suo modello di base, il metodo di addestramento, il lotto di immagini d'origine, l'eventuale parola di attivazione e l'intensità a cui applicarlo. Un LoRA scaricato senza queste informazioni è un file di cui non si sa cosa farà.

Quando serve un LoRA

Per un creativo, il LoRA diventa interessante quando serve a costruire una continuità visiva:

  • una serie: lo stesso rendering, la stessa luce, la stessa estetica su tutte le immagini di una collezione;
  • un marchio: un'identità visiva che tiene da una campagna all'altra, senza ridescriverla ogni volta;
  • un personaggio o un prodotto: lo stesso volto, lo stesso oggetto, riconoscibile da un'immagine all'altra e da una scena all'altra.

È ciò che un testo da solo non sa far durare, e ciò che un riferimento visivo fa tenere su qualche immagine ma non su mesi di produzione.

Cosa un LoRA non sostituisce

Un LoRA fa tenere un'identità. Non sostituisce la direzione artistica: non dice quale immagine fare, né se è buona. Non sostituisce neppure il metodo: la scelta del motore, i riferimenti, il ritocco per zona, il livello bloccato. E un LoRA addestrato su un cattivo lotto di immagini riproduce fedelmente quel cattivo lotto.

L'altro modo di tenere un'identità, più flessibile e senza addestramento, è il riferimento visivo a cui si dà un ruolo: Workflow con riferimenti visivi. I due si combinano: il riferimento per un progetto, il LoRA per ciò che deve tenere nel tempo.

Il LoRA nel workflow

Una volta costruito, il LoRA diventa un mattone del workflow, non il workflow: si aggiunge al motore, si combina con i riferimenti, e ciò che produce si giudica, si corregge e si blocca come il resto. Cosa un LoRA richiede alla macchina e dove si colloca: Quanta VRAM per generare immagini IA? e I modelli in ComfyUI.

Presso Axiris, la costruzione di un LoRA fa parte della messa in opera di un workflow per uno studio o un marchio che ha bisogno di una continuità visiva. Le altre famiglie di motori: Modelli IA per la creazione di immagini.

Richiesta di contatto: un primo scambio offerto, senza impegno. Ogni pratica è diversa, è ascoltandoLa che proponiamo ciò che Le conviene.