Lo strumento AI per l'editing delle immagini del MIT sostituisce facilmente lo sfondo in qualsiasi immagine
Questo strumento di modifica delle immagini assistito dall'intelligenza artificiale del MIT può cambiare lo sfondo di qualsiasi immagine
Per molto tempo, Photoshop è stato il programma che molti di noi utilizzano per rendere le nostre foto fantastiche con correzioni rapide e miglioramenti creativi.
Ora, i ricercatori del Computer Science and Artificial Intelligence Laboratory (CSAIL) del MIT hanno sviluppato uno strumento di modifica delle immagini assistito dall'intelligenza artificiale che automatizza molte parti del processo di modifica delle foto. Questo renderà più facile il lavoro di modifica delle foto.
"Invece di aver bisogno di un editor esperto per dedicare diversi minuti a modificare un'immagine fotogramma per fotogramma e pixel per pixel, vorremmo rendere il processo più semplice e veloce in modo che l'editing delle immagini possa essere più accessibile agli utenti occasionali", afferma Yagiz Aksoy, ricercatore in visita presso il CSAIL.
"La visione è quella di arrivare a un punto in cui basta un solo clic per gli editor per combinare le immagini per creare questi mondi fantastici realistici e in piena regola. ”
Chiamato "Semantic Soft Segmentation" (SSS), questo metodo utilizza l'intelligenza artificiale (AI) per separare automaticamente gli oggetti in un'immagine che consente una facile modifica delle immagini. Ad esempio, utilizzando questa tecnica, è possibile modificare l'aspetto dello sfondo o unire le immagini in primo piano e sullo sfondo in una scena completamente nuova.
Come funziona SSS?
Lo strumento studia la consistenza e il colore dell'immagine originale e li combina con le informazioni raccolte da una rete neurale su quali siano effettivamente gli oggetti all'interno dell'immagine. La rete neurale elabora le caratteristiche dell'immagine e rileva le "transizioni morbide" come capelli ed erba.
"Una volta calcolati questi segmenti morbidi, l'utente non deve modificare manualmente le transizioni o apportare modifiche individuali all'aspetto di un livello specifico di un'immagine", afferma Aksoy. "Le attività di modifica manuale come la sostituzione degli sfondi e la regolazione dei colori sarebbero molto più semplici. ”
I pixel dell'immagine vengono quindi associati tra loro in base al colore. Queste informazioni vengono combinate con le caratteristiche rilevate dalla rete neurale per stimare i livelli dell'immagine. Tuttavia, questo compito non è semplice, poiché ai computer deve essere insegnato come farlo.
"La cosa difficile di queste immagini è che non ogni pixel appartiene a un solo oggetto", ha aggiunto Aksoy, che ha presentato il documento alla conferenza annuale di computer-grafica SIGGRAPH a Vancouver la scorsa settimana. "In molti casi, può essere difficile determinare quali pixel fanno parte dello sfondo e quali fanno parte di una persona specifica. ”
Dove si può usare SSS?
Secondo Aksoy, SSS nella sua attuale iterazione potrebbe essere utilizzato da piattaforme social come Instagram e Snapchat per rendere i loro filtri più realistici, principalmente per cambiare gli sfondi dei selfie o simulare specifici tipi di fotocamere.
Piani per il futuro
In futuro, i ricercatori hanno in programma di lavorare per ridurre il tempo necessario per calcolare un'immagine da minuti a secondi e per rendere le immagini ancora più realistiche migliorando la capacità del sistema di abbinare i colori e gestire cose come l'illuminazione e le ombre.
Fonte: CSAIL