In Photoshop arriva l'IA di nuova generazione

In Photoshop arriva l'IA di nuova generazione

di Alberto De Bernardi , pubblicato il

“È disponibile in fase beta la funzione Genertive Fill avanzata di Photoshop, basata su Firefly 3. Più qualità e controllo, grazie soprattutto alle immagini di riferimento, e integrazione perfetta, ma l'utilizzo dell'IA non è più illimitato e gratuito. ”

Sono passati solo pochi mesi da quando abbiamo parlato dell'introduzione dell'IA generativa in Photoshop nella sua prima forma definitiva (conclusa cioè la fase beta), avvenuta con la versione 25.0 del programma. Ciò non di meno, è già il momento di parlare del primo sostanzioso aggiornamento del pacchetto IA, reso disponibile in fase beta con la versione Photoshop V25.8.

Di che si tratta? Essenzialmente, di maggior qualità delle immagini generate e maggior controllo su di esse, grazie soprattutto alla possibilità di utilizzare immagini di riferimento per meglio indirizzare l'IA. Da non sottovalutare, comunque, i vantaggi pratici della maggior integrazione nell'interfaccia di Photoshop, con la possibilità, per la prima volta, di utilizzare la funzione detta da testo a immagine (generazione di immagini attraverso un prompt testuale) direttamente entro il programma.

Prima di procedere a esaminare più in dettaglio le novità, però, è bene richiamare l'attenzione su alcune limitazioni introdotte da Adobe a partire da inizio anno (17 gennaio 2024).

La generazione di immagini grazie all'IA è, come noto, computazionalmente (quindi energeticamente) dispendiosa, e non sarà più possibile utilizzarla in modo indiscriminato. Adobe ha introdotto, allo scopo, i cosiddetti crediti generativi, moneta spendibile per creare contenuti basati su IA.

Questi crediti, che si rinnovano mensilmente (senza possibilità di accumulo dei crediti non utilizzati) vengono elargiti in quantità dipendente dal tipo di abbonamento – ad esempio, il piano Fotografia 1 TB vale 500 crediti generativi mensili, mentre la sola App Cloud Lightroom ne vale 100. Esistono anche casi, come quello del piano Fotografia 20 GB, in cui la quantità di crediti dipende dalla data di sottoscrizione dell'abbonamento. Rimandiamo al sito dedicato Adobe per informazioni specifiche per il proprio caso.

Quale che sia l'ammontare di crediti generativi disponibili mensilmente, ogni azione costerà tipicamente 1 credito. Ad esempio, per quanto riguarda Photoshop, le funzioni Genera immagine, Genera sfondo, Genera simile, Riempimento generativo, Espansione generativa e Immagine di riferimento costeranno tutte 1 credito.

Anche in questo caso, rimandiamo alla pagina dedicata per informazioni dettagliate, che sicuramente evolveranno nel tempo – ad esempio, al momento in cui scriviamo, gli effetti di testo di Adobe Express sono ancora a costo zero, ma avranno un costo diverso da zero (ancora incognito) a partire dal 1° luglio 2024.      


Un primo esempio di utilizzo dell'IA generativa per l'inserimento di elementi inesistenti. A prima vista il risultato è ottimo, anche se un'analisi più attenta svela tipicamente sempre la presenza di artefatti più o meno gravi.

Probabilmente qualcuno vivrà questa limitazione come una vessazione, ma a titolo personale siamo favorevoli. Sarebbe piuttosto ipocrita parlare di sostenibilità e assumere posizioni intransigenti (a carico altrui) mentre si consumano KWh per creare frivolezze da postare sui social…

Tutto ciò premesso, è il momento di esaminare le novità tecniche.

Ricordiamo che, volendo sperimentare in prima persona le novità di Firefly 3, è possibile farlo direttamente online partendo dal sito Adobe Firefly, mentre volendo valutare in modo più specifico le novità di Photoshop, è possibile installare l'App beta partendo da Creative Cloud Desktop (anche in periodo di prova 30 giorni), selezionando App nella colonna di sinistra, quindi Beta sulla barra orizzontale, infine Photoshop (Beta). Le applicazioni beta possono convivere con l'eventuale versione stabile già installata.

In Photoshop, la vera, grande novità riguarda la generazione di immagini a partire da prompt testuale, che ora, come anticipato, beneficia di uno strumento apposito e di una piccola interfaccia dedicata. Ciò significa che è possibile fare tutto, più comodamente, anche dentro Photoshop.


Per l'uso delle funzioni IA, la barra contestuale è fondamentale. Se non dovesse essere presente, si può richiamare spuntando Barra delle attività contestuale dal menu Finestra.

È possibile scegliere di generare un contenuto artistico, ad esempio un dipinto, oppure un'immagine fotorealistica, ed è possibile indirizzare l'IA specificando uno stile, un tema (Fumetto, pop-art, graffiti…), una tecnica (acrilico, olio su tela, chiaroscuro…), degli effetti (fotografia con grandangolo…), dei materiali o dei concetti astratti (futuristico, nostalgico, kitsch…).

Il risultato sarà sempre un terzetto di proposte tra cui scegliere, e ora si aggiunge la funzione Genera simile, applicabile a una delle tre proposte, molto utile per indirizzare l'IA verso il risultato desiderato.

In questo senso, utile sottolineare come il prompt che ha generato l'immagine resti disponibile, e possa quindi essere comodamente modificato/affinato prima di premere nuovamente sul pulsante Genera. Ad esempio, è possibile passare da "vaso con fiori" a "vaso con 3 fiori" a "vaso con 3 fiori rossi". Ovviamente l'utilità della cosa si apprezza più in presenza di prompt complessi.

A proposito, il prompt di testo può essere più complesso che in precedenza, e viene meglio interpretato. Ad esempio:

Ritratto fotografico di donna caucasica. La donna dovrà avere lunghi capelli rossi e occhi verdi. Utilizza uno schema di luce rembrandt per illuminare il soggetto.

Ha restituito una serie di risultati, di cui mostriamo tre esempi qui sopra, tutti piuttosto aderenti alla richieste (fatta eccezione per lo schema di illuminazione, ancora, evidentemente, oltre le possibilità dell'IA). La qualità fotografica è certamente cresciuta, anche – se non soprattutto – in termini di luce, e questo è senza dubbio uno dei punti di forza della soluzione Adobe.  

Molto continua a dipendere, e non potrà essere diversamente in futuro, dalla disponibilità di immagini simili alla richiesta entro la biblioteca Adobe Stock, a cui l'IA può attingere. Se non c'è nulla di davvero aderente alla richiesta, il software arrancherà alla ricerca dell'immagine più simile possibile, che potrà però ovviamente essere anche molto distante dal risultato desiderato. E questo è, con tutta probabilità, il maggior punto debole di Firefly.


In alto: risultato di Adobe Photoshop beta. In basso: risultato di Bing Image Generator a parità di prompt, che richiedeva una donna in abito da sera rosso a passeggio per le strade (bagnate) di Tokio.

La biblioteca Adobe Sock, per quanto ampia, non è infinita, e la nostra impressione è che altre soluzioni – abbiamo provato, banalmente, a dare in pasto gli stessi prompt a Bing Image Generator – attingano a biblioteche ben più ampie e siano per questo in grado di dare fin dal primo tentativo un risultato mediamente più aderente alle aspettative.  

La possibilità di utilizzare un'immagine di riferimento è, in generale, un grande aiuto per indirizzare correttamente il software. Ad esempio, il prompt:

Campo di papaveri rossi. Papaveri in primo piano, erba verde sullo sfondo, sole al tramonto.   

Ha generato in prima istanza i tre esempi qui sopra, tutti per inciso soddisfacenti, ma caricando un'immagine di esempio, l'IA ha restituito un risultato molto simile senza necessità di aggiungere istruzioni che, nel caso specifico, sarebbero dovute essere estremamente dettagliate.


A sinistra: immagine di riferimento. A destra: Immagine generata.

L'immagine di riferimento, in altri termini, elimina o riduce la necessità di scrivere prompt complessi in una sequenza trial-and-error che, in molti casi, può rivelarsi anche piuttosto lunga e laboriosa.   

L'immagine di riferimento può essere utilizzata anche per una sostituzione selettiva, potenziando o rendendo più efficiente le funzioni di riempimento generativo già disponibili.
In questo contesto, l'immagine di esempio funge da "ispirazione" per l'IA, tipicamente per sostituire un oggetto presente sulla scena con un altro oggetto.


Tre esempi di sostituzione selettiva "ispirata" da un'immagine di riferimento (visibile nel menu contestuale di ciascuna schermata). Risultati molto diversi. In alto: operazione non perfetta, ma sufficiente a passare l'esame di uno sguardo superficiale. Al centro: risultato palesemente innaturale, richiederebbe uso di prompt testuale. In basso: la richiesta di sostituzione di una fotocamera Leica con una Panasonic ha dato (tra gli altri) questi due risultati. La fotocamera ricostruita da Adobe è assolutamente irrealistica ma, per lo meno, ricorda una vera fotocamera; come l'IA sia arrivata a inserire l'immagine di un cucciolo d'orso polare è un fitto mistero...

Difficilmente però si ottengono risultati perfetti, o anche solo plausibili, quando l'immagine in questione deve essere fotorealistica. Su questo fronte, ci sono sicuramente molti passi ancora da compiere…

Tutto è ovviamente molto più semplice e convincente in caso di immagini astratte, disegni, fumetti, e contenuti che, in generale, non devono confrontarsi con la realtà.

Vale comunque la pena menzionare la nuova funzione Migliora dettagli, che esegue un upscaling della risoluzione dell'oggetto inserito per meglio inserirlo in immagini di partenza in alta risoluzione. La funzione si attiva cliccando sull'apposita icona nell'angolo superiore sinistro della miniatura (tra le tre proposte), e non consente di personalizzare alcunché. 

Per il resto, continuano a valere le valutazioni espresse per la versione di debutto 25.0, che possiamo sintetizzare in questo modo. Le funzioni di riempimento generativo sono già piuttosto mature e restituiscono ottimi risultati soprattutto quando si tratta di cancellare (rimozione di oggetti indesiderati, rimozione dello sfondo).

Fanno generalmente un buon lavoro anche quando si tratta di estendere la scena "inventando" parti inesistenti, a patto che la scena in questione non contenga geometrie precise (con cui ovviamente si notano maggiormente le imperfezioni).    


Uno dei frequenti risultati inspiegabili che si ottengono con la funzione Sostituzione sfondo. Ottimo scontorno, ma perché, a fronte di un prompt che chiedeva uno sfondo neutro, è starta creata quella sorta di volta visibile a destra?.

L'inserimento/sostituzione di oggetti deve invece ancora migliorare molto. Non che sia impossibile, in particolari circostanze favorevoli, ottenere buoni risultati anche in questo campo, ma la maggioranza degli inserimenti non apparirà né realistica né plausibile.

In definitiva, possiamo dire che, a distanza di soli sei mesi dal debutto o poco più, la piattaforma generativa di Adobe abbia già compiuto importanti passi avanti: è infatti ora meglio integrata, e consente un dialogo più naturale con l'IA, sia perché accetta e interpreta meglio prompt più complessi, sia (soprattutto) per l'uso dell'immagine "di riferimento". È, dunque, in termini di usabilità che si vedono i progressi più sostanziali.


Viso generato da Bing (a sinistra) contro viso generato da Adobe (a destra). La differenza è notevole.

La qualità delle immagini fotorealistiche generate (ci riferiamo soprattutto ai volti umani) è aumentata apprezzabilmente, ed è ai vertici della categoria.

Il tallone d'Achille potrebbe essere la base di immagini di riferimento. Come già detto, abbiamo infatti avuto la sensazione che, a parità di prompt, altri strumenti generativi producessero immagini più aderenti alle aspettative fin dal primo tentativo, forse proprio grazie alla più ampia base di riferimento utilizzata. D'altro canto, con la sua base "chiusa" Adobe Sock, la piattaforma Adobe offre il massimo delle garanzie in termini di legalità, correttezza e rispetto dei diritti d'autore, un aspetto da non sottovalutare per i professionisti.


Commenti (11)

Gli autori dei commenti, e non la redazione, sono responsabili dei contenuti da loro inseriti - Info
Per contattare l'autore del pezzo, così da avere una risposta rapida, si prega di utilizzare l'email personale (vedere in alto sotto il titolo). Non è detto che una domanda diretta inserita nei commenti venga verificata in tempi rapidi. In alternativa contattare la redazione a questo indirizzo email.
Commento # 1 di: frankie pubblicato il 15 Maggio 2024, 16:49
Nota per la redazione,

Usando FF aggiornato su W11, non riesco ad aprire le anteprime delle foto multiple, si apre sempre e solo la prima a sinistra.
Commento # 2 di: D4N!3L3 pubblicato il 15 Maggio 2024, 18:11
Ma invece di usare i crediti non si potrebbe farlo funzionare in locale?
Commento # 3 di: virtualdj pubblicato il 15 Maggio 2024, 18:45
Originariamente inviato da: frankie
Usando FF aggiornato su W11, non riesco ad aprire le anteprime delle foto multiple, si apre sempre e solo la prima a sinistra.

Anch'io all'inizio non c'ero arrivato (con Firefox su W10): non sono immagini multiple ma una singola immagine "larga" da scrollare orizzontalmente!
Commento # 4 di: lollo9 pubblicato il 15 Maggio 2024, 20:25
Originariamente inviato da: D4N!3L3
Ma invece di usare i crediti non si potrebbe farlo funzionare in locale?


che io sappia no. credo che non vogliano far uscire i training set dai loro data center. ma è vero che in fin dei conti se in locale gira stable diffusion, girerebbe pure photoshop.

non conosco i dettagli, ma se i dataset per il training sono certificati essere puliti da potenziali problemi di copyright, avrebbero anche un certo interesse a tenerseli in pancia.
Commento # 5 di: Manu1976 pubblicato il 15 Maggio 2024, 23:10
vado un po' OT, ma ho una domanda: attualmente, qual è lo stato dell'arte nella rimozione di persone od oggetti da foto esistenti? perché se lo faccio fare a chatgpt e amici, a parte il rispondermi che non può gestire persone per ragioni di privacy, i risultati sono davvero pessimi.
Commento # 6 di: Vindicator pubblicato il 16 Maggio 2024, 08:51
un po tutti i servizi web based vanno su crediti a pagamento come fanno a mantenere i dipendenti e i server?

potete usare Google Collab e InvokeAi è una interfaccia gratuitamente, su github ci sono le istruzioni
se create piu account gmail avete 2-3 ore per account di utilizzo per volta poi si resetta
Commento # 7 di: rvrmarco pubblicato il 16 Maggio 2024, 09:51
Originariamente inviato da: lollo9
che io sappia no. credo che non vogliano far uscire i training set dai loro data center. ma è vero che in fin dei conti se in locale gira stable diffusion, girerebbe pure photoshop.

non conosco i dettagli, ma se i dataset per il training sono certificati essere puliti da potenziali problemi di copyright, avrebbero anche un certo interesse a tenerseli in pancia.


ma cosa c'entrano i training set? i modelli si deployano trainati
Commento # 8 di: !fazz pubblicato il 16 Maggio 2024, 12:08
Originariamente inviato da: rvrmarco
ma cosa c'entrano i training set? i modelli si deployano trainati


perchè rinunciare ad un'occasione per guadagnare di più? giò photoshop lo fanno in abbonamento ....
Commento # 9 di: Bello&Monello pubblicato il 16 Maggio 2024, 16:47
Diciamo che il paragone è un po' "paraculo" perchè Bing Images non è che sia un razzo missile nella generazione di immagini.

Un confronto con Midjourney non sarebbe sicuramente così impari..

Sarebbe interessante avere i prompt esatti per fare dei test.
Commento # 10 di: nyo90 pubblicato il 16 Maggio 2024, 21:48
Originariamente inviato da: !fazz
perchè rinunciare ad un'occasione per guadagnare di più? giò photoshop lo fanno in abbonamento ....


Purtroppo ormai è tutto un abbonamento, senza alcuna possibilità di avere lo stesso servizio pagando una cifra fissa. E la questione è tutta qui: Tutto guadagno per loro e molti utenti che, vedendo cifre "Piccole" si dimenticano di fare la somma.

Pagherei volentieri una cifra consistente per avere le stesse cose, in locale, tenendomi quella versione finché mi va bene. Purtroppo, ho dovuto acquistare Affinity Photo per poterlo fare. Ma ora, con le IA, inizio ad usare app sul telefono che velocizzano molti lavori("gratis", ma se solo potessi pagare "una botta e via" farei volentieri tutto da Mac
« Pagina Precedente     Pagina Successiva »