Mi az a Deep Fusion? Az Apple képfeldolgozó technológiája elmagyarázta

A Deep Fusion egy képfeldolgozó rendszer, amelyet az Apple először az iPhone 11 sorozatban mutatott be, és így működik.

Amikor új iPhone-ján próbálja ki a kamerát, észrevehet néhány különféle módot vagy szűrőt, amelyekkel játszva módosíthatja fényképei megjelenését. A legfontosabb funkciók egy része azonban a háttérben működik anélkül, hogy az alkalmazásban látható lenne – ezek egyike a Deep Fusion.

Ezt a funkciót a megjelenésével jelentették be iPhone 11 sorozat, még 2019-ben, és Phil Schiller, a világméretű termékmarketing akkori alelnöke így jellemezte a technológiát, amikor először bemutatták:

Kilenc képet készít. Mielőtt lenyomná az exponáló gombot, már négy rövid képet, négy másodlagos képet készített; az exponáló gomb lenyomásakor egy hosszú expozíciót vesz igénybe, majd mindössze egy másodperc alatt a Neural Engine elemzi a hosszú és rövid képek egyesített kombinációját, és kiválasztja közülük a legjobbat, az összes képpont kiválasztása pixelenként, 24 millió képponton keresztül, hogy optimalizálja a részleteket és az alacsony zajszintet… Ez az első alkalom, hogy egy neurális motor felelős a kimenet létrehozásáért kép. Ez a számítógépes fényképezés őrült tudománya.

instagram viewer

Ezt a magyarázatot képillusztrációkkal az Apple 2019. szeptemberi eseményén tekintheti meg az alábbi videóban (1:21:54-től):

Tömörebben az Apple kifejtette a sajátjában hivatalos sajtóközlemény a következőképpen: „A Deep Fusion fejlett gépi tanulást használ a fényképek pixelenkénti feldolgozásához, optimalizálva a textúrát, a részleteket és a zajt a fotó minden részén.”

Meg kell tapasztalnia, hogy ennek a technológiának köszönhetően a részletek rendkívül lenyűgöző mértékben reprodukálhatók, még akkor is, ha nehezebb körülmények között dolgozik. Az Apple által adott példák, beleértve a fenti képet is, kihívást jelentő és sokféle textúrájú témákat mutatnak be, mint például a gyapjas jumperek és a bőr, kevésbé ideális megvilágítás mellett, amelyek teljes dicsőségükben mutatkoznak meg, miután ez az igényes eljárás egy pillanat alatt lezajlott. második.

A Deep Fusion funkció a leghasznosabb (és automatikusan beindul) beltéri és közepes megvilágítású beállításoknál. Ahogy korábban említettük, ez nem látszik a telefon felületén: a kameraalkalmazásban nem találunk „Deep Fusion” gombot, és nincs egyszerű kapcsoló sem a be- és kikapcsoláshoz. A perem az Apple szóvivője szerint ez „nagyon szándékos, mivel nem akarja, hogy az emberek azon gondolkodjanak, hogyan készítsék el a legjobb fotót”. Az ötlet az, hogy a kamera megoldja helyetted.