Što je Deep Fusion? Objašnjena Appleova tehnologija obrade slika

Deep Fusion je sustav za obradu slike koji je Apple prvi put predstavio u seriji iPhone 11, a evo kako funkcionira.

Kada isprobavate kameru na svom novom iPhoneu, možda ćete primijetiti nekoliko različitih načina ili filtara s kojima se možete poigrati kako biste promijenili izgled svojih fotografija. Međutim, neke od najvažnijih značajki rade u pozadini bez vidljive prisutnosti u aplikaciji — a jedna od njih se zove Deep Fusion.

Ova je značajka najavljena s lansiranjem iPhone 11 serije, još 2019. godine, a evo kako je tadašnji viši potpredsjednik globalnog marketinga proizvoda Phil Schiller opisao tehnologiju kada je prvi put predstavljena:

Snima devet slika. Prije nego što pritisnete okidač, već su snimljene četiri kratke slike, četiri sekundarne slike; kada pritisnete okidač, potrebna je jedna duga ekspozicija, a zatim u samo jednoj sekundi, Neural Engine analizira spojenu kombinaciju dugih i kratkih slika, birajući najbolju među njima, odabirom svih piksela i piksel po piksel, prolazeći kroz 24 milijuna piksela radi optimizacije za detalje i nisku razinu šuma... Ovo je prvi put da je neuronski motor odgovoran za generiranje izlaza slika. To je računalna fotografija luda znanost.

instagram viewer

Ovo objašnjenje, sa ilustracijama slika, možete pogledati na Appleovom rujanskom događaju 2019. u videu ispod (počevši od 1:21:54):

Sažetije, Apple je to objasnio u svom službeno priopćenje za javnost kako slijedi: "Deep Fusion koristi napredno strojno učenje za obradu fotografija piksel po piksel, optimizirajući teksturu, detalje i šum u svakom dijelu fotografije."

Trebali biste otkriti da se detalji reproduciraju u vrlo impresivnoj mjeri zahvaljujući ovoj tehnologiji, čak i kada radite u zahtjevnijim uvjetima. Primjeri koje je dao Apple, uključujući gornju sliku, pokazuju izazovne predmete s više tekstura poput vunenih džempera i kože, pod manje od idealnog osvjetljenja, koji se pokazuju u svom svom sjaju nakon što se ovaj zahtjevni postupak odvija u samo jednom drugi.

Značajka Deep Fusion najkorisnija je (i namijenjena je automatskom uključivanju) za postavke u zatvorenom prostoru i srednje osvjetljenje. Kao što je već spomenuto, nije vidljiv na sučelju telefona: nećete pronaći gumb "Deep Fusion" u aplikaciji za kameru, a ne postoji ni jednostavan prekidač za uključivanje ili isključivanje. The Verge citira glasnogovornika Applea koji je rekao da je to 'vrlo namjerno, jer ne želi da ljudi razmišljaju o tome kako dobiti najbolju fotografiju. Ideja je da će vam kamera to samo riješiti.’