Kas ir Deep Fusion? Paskaidrota Apple attēlu apstrādes tehnoloģija

Deep Fusion ir attēlu apstrādes sistēma, ko Apple pirmo reizi ieviesa iPhone 11 sērijā, un lūk, kā tā darbojas.

Izmēģinot kameru savā jaunajā iPhone tālrunī, iespējams, pamanīsit dažus dažādus režīmus vai filtrus, ar kuriem varat spēlēt, lai mainītu fotoattēlu izskatu. Tomēr dažas no vissvarīgākajām funkcijām darbojas fonā bez redzamas klātbūtnes lietotnē — un vienu no tām sauc par Deep Fusion.

Šī funkcija tika paziņota, uzsākot iPhone 11 sērija, tālajā 2019. gadā, un šādi toreizējais pasaules produktu mārketinga vecākais viceprezidents Fils Šillers aprakstīja tehnoloģiju, kad tā tika pirmo reizi atklāta:

Tas uzņem deviņus attēlus. Pirms slēdža pogas nospiešanas jau ir uzņemti četri īsi attēli, četri sekundāri attēli; nospiežot slēdža pogu, tiek veikta viena ilga ekspozīcija, un pēc tam tikai vienā sekundē neironu dzinējs analizē garo un īso attēlu sapludināto kombināciju, izvēloties labāko no tiem, atlasot visus pikseļus un pa pikseļiem, izejot cauri 24 miljoniem pikseļu, lai optimizētu detaļas un zemu trokšņa līmeni… Šī ir pirmā reize, kad neironu dzinējs ir atbildīgs par izvades ģenerēšanu attēlu. Tā ir skaitļošanas fotogrāfijas traka zinātne.

instagram viewer

Šo skaidrojumu ar attēlu ilustrācijām varat noskatīties Apple 2019. gada septembra pasākumā tālāk esošajā videoklipā (sākot no plkst. 1:21:54):

Īsāk sakot, Apple to paskaidroja savā oficiālais paziņojums presei šādi: "Deep Fusion izmanto uzlabotu mašīnmācīšanos, lai veiktu fotoattēlu apstrādi pa pikseļiem, optimizējot tekstūru, detaļas un troksni katrā fotoattēla daļā."

Jums vajadzētu konstatēt, ka, pateicoties šai tehnoloģijai, detaļas tiek reproducētas ļoti iespaidīgā apjomā, pat strādājot sarežģītākos apstākļos. Apple sniegtie piemēri, tostarp iepriekš redzamais attēls, parāda izaicinošus un daudzveidīgus objektus, piemēram, vilnas džemperus un ādu, mazāk nekā ideālā apgaismojumā, kas tiek parādīti visā savā krāšņumā pēc tam, kad šī prasīgā procedūra ir veikta tikai otrais.

Deep Fusion funkcija ir visnoderīgākā (un tā ir paredzēta automātiskai aktivizēšanai) iekštelpu un vidēja apgaismojuma iestatījumiem. Kā jau minēts iepriekš, tas nav redzams tālruņa saskarnē: kameras lietotnē neatradīsit pogu “Deep Fusion”, un nav vienkārša slēdža, lai to ieslēgtu vai izslēgtu. The Verge Apple pārstāvis citē, ka tas "ir ļoti apzināti, jo nevēlas, lai cilvēki domā par to, kā iegūt vislabāko fotoattēlu". Ideja ir tāda, ka kamera to vienkārši sakārtos jūsu vietā.