Mis on Deep Fusion? Selgitas Apple'i pilditöötlustehnoloogia

Deep Fusion on pilditöötlussüsteem, mida Apple tutvustas esmakordselt iPhone 11 seerias ja see toimib järgmiselt.

Kui proovite kaamerat oma uues iPhone'is, võite märgata mõnda erinevat režiimi või filtrit, millega saate oma fotode välimust muuta. Mõned kõige olulisemad funktsioonid töötavad aga taustal ilma rakenduses nähtava kohalolekuta – ja ühte neist nimetatakse Deep Fusioniks.

Sellest funktsioonist teatati koos rakenduse käivitamisega iPhone 11 seeria, 2019. aastal, ja järgmiselt kirjeldas tollane ülemaailmse tooteturunduse vanem asepresident Phil Schiller tehnoloogiat, kui see esmakordselt avalikustati:

See teeb üheksa pilti. Enne päästiku vajutamist on juba tehtud neli lühikest pilti, neli teisest pilti; päästiku vajutamisel kulub üks pikk säritus ja siis vaid ühe sekundi jooksul analüüsib närvimootor pikkade ja lühikeste piltide kombineeritud kombinatsiooni, valides nende hulgast parimad, valides kõik pikslid ja pikslite kaupa, läbides 24 miljonit pikslit, et optimeerida detaile ja madalat müra... See on esimene kord, kui närvimootor vastutab väljundi genereerimise eest pilt. See on arvutifotograafia hullumeelne teadus.

instagram viewer

Seda selgitust koos piltillustratsioonidega saate vaadata Apple'i 2019. aasta septembrisündmusel allolevast videost (alates 1:21:54):

Lühidalt selgitas Apple seda oma ametlik pressiteade järgmiselt: "Deep Fusion kasutab fotode pikslite kaupa töötlemiseks täiustatud masinõpet, optimeerides foto igas osas tekstuuri, detaile ja müra."

Peaksite avastama, et tänu sellele tehnoloogiale taasesitatakse detaile muljetavaldavalt isegi keerulisemates tingimustes töötades. Apple'i toodud näited, sealhulgas ülaltoodud pilt, näitavad väljakutseid pakkuvaid ja mitme tekstuuriga teemasid, nagu villased džemprid ja nahk, ideaalsest ebasoodsast valgustusest, mis ilmuvad kogu oma hiilguses pärast seda, kui see nõudlik protseduur on toimunud vaid ühe teiseks.

Deep Fusion funktsioon on kõige kasulikum (ja see on mõeldud automaatselt käivituma) siseruumides ja keskmise valgusega seadetes. Nagu eelnevalt mainitud, pole seda telefoni liideses näha: kaamerarakendusest ei leia nuppu “Deep Fusion” ning selle sisse- või väljalülitamiseks pole lihtsat lülitit. The Verge tsiteerib Apple'i pressiesindaja, kes ütles, et see on "väga tahtlik, kuna see ei taha, et inimesed mõtleksid sellele, kuidas parimat fotot saada". Idee seisneb selles, et kaamera lahendab selle teie jaoks lihtsalt ära.