Мнение: Защо Deep Fusion на iPhone 11 Pro може да го направи съперник на Pixel 4

Камерите на iPhone на Apple от години непрекъснато изостават на няколко крачки от своите съперници - и хипнотизирането на „извийте до 11“ около признатите нови фотографски сили на iPhone 11 Pro че.

И така, вчерашното поле за изкривяване на реалността се изхаби, наистина ли е успяло Apple да преодолее фотографската пропаст между своите iPhone и подобни на Google Pixel?

Мисля, че има добър шанс и основната причина е, че неговият „Deep Fusion“ (и в по-малка степен „Нощен режим“) означава, че накрая да поеме Google в собствената си игра за изчислителна фотография - с допълнителната помощ на няколко традиционни Apple предимства.

Разбира се, този отдавна закъснял „Нощен режим“ е просто случай на Apple със закъснение да търгува фигури с „Night Sight“ на Google. Предлага се на всички нови iPhone, включително по-евтините iPhone 11, този режим изглежда работи по идентичен начин с Pixel 3, като обединява множество изображения заедно, за да озарява нощните сцени и да намалява шума.

Нощният режим на Apple също използва адаптивни брекети, което означава, че ще намали времето за експозиция на всеки кадър, ако усети движение в кадъра. Това означава, че като на

Пиксел 4, може да е полезен режим извън далеч от нощните сцени - разпознаваемият, супер изчистен вид на Google „Нощен поглед“ става все по-често срещан, тъй като хората са се научили да обичат неговата гъвкавост извън тъмночервения цвят сцени.

Свързани: iPhone 11 Pro и iPhone 11 Pro Max: Дата на издаване, цена и спецификации

Deep Fusion: Как работи

Но нощните режими не са нищо ново. По-вълнуващата функция несъмнено е „Deep Fusion“. Разбира се, това е поредният абсурден маркетингов термин на Apple, който се подава заедно с дисплеите на Retina и ще бъде наличен само с по-късна актуализация на фърмуера. Описанието на Apple (сравнително оскъдно) за това как работи обаче предполага, че все още може да помогне на iPhone поне да намали разликата в конкурентите на Google и Huawei.

„Deep Fusion“ не е поредният „Нощен режим“ (както видяхме, Apple вече го има). Вместо това звучи много по-скоро като техниката за супер-разделителна способност, която Google е използвал и преди в своя Super Res Zoom. Това не означава, че Apple ще го използва за увеличение - той вече има 52-милиметрова телефото камера за това - но вместо това за създаване на висококачествени 24MP изображения с висока разделителна способност, които сензорът му просто не може да създаде върху тях собствен.

И така, как работи Deep Fusion? Подобно на техниката на Google за супер разделителна способност, тя използва мощен конвейер за обработка на изображения, за да комбинира предимствата на HDR с измамата Pixel Shift, наблюдавана на по-големи камери като Sony A7R IV. Резултатът, в определени ситуации, теоретично трябва да създаде най-добрите снимки на iPhone досега и някои от най-добрите, които сме виждали от смартфон.

Подобно на Pixel, „Deep Fusion“ ще види iPhone 11 Pro непрекъснато буферира няколко изображения в очакване да натиснете затвора, хвърляйки настрана неизползваните, за да освободите място за нови кадри. Понастоящем HDR + режимът на Pixel буферира до 15 изображения, докато iPhone 11 Pro вместо това ще направи това с девет - според Apple това ще се състои от четири кратки изображения, четири „вторични“ изображения, плюс крайния ви затвор Натиснете.

Засега Smart HDR, макар и с удвоен брой буферирани изображения. Но там, където Deep Fusion отнема нещата, е финалната преса на затвора, която е с една по-дълга експозиция, и начинът, по който снимката след това се сглобява.

Първо, за разлика от нощните режими, Deep Fusion очевидно ще бъде процес в реално време. Благодарение на относително късите скорости на затвора на буферираните кадри, не трябва да се задържате неподвижно и да чакате, докато камерата се спука. Просто ще има по-дългото време за експозиция, когато натиснете затвора, плюс секундата, която ще му отнеме нейният невронният двигател, за да го обработи.

Последното също е друга ключова разлика от HDR - iPhone 11 Pro не просто ще осреднява събраните кадри, но по-скоро сглобяване на по-голямо 24-мегапикселово изображение пиксел по пиксел, вероятно с помощта на OIS, „за оптимизиране за детайли и ниско шум ”.

Точно как ще направи това, не е ясно, но би могло да използва техниката на Google за разбиване на всеки кадър на хиляди плочки, подравняването им и след това извършване на допълнителна обработка отгоре. Това би означавало, че леките движения във вашата сцена не трябва да се появяват като размазване, което го прави по-гъвкав режим, а не просто трик.

Така или иначе, причината, поради която Deep Fusion е голяма работа, е, че това не е просто нишова подфункция като портретното осветление на Apple - това е цяла система за обработка на изображения, която вероятно ще комбинира силите на OIS, чип A13 Bionic, подреждане на експозиция и машинно обучение в стил Google (плюс, може би дори и трите лещи, както се говореше), за да преодолеят разликата към входящия Pixel 4.

Свързани: Pixel 4 се нуждае от тази функция на камерата - и тя няма нищо общо с фотографията

Реакция на синтез

И така, за какви ситуации ще бъде полезен Deep Fusion? Примерният портретен кадър, използван от Apple (отдолу), съдържа „слаба до средна светлина“ и това изглежда най-добрият сценарий за него - не толкова тъмен, че се нуждаете от Нощен режим, но достатъчно предизвикателен, за да видите истинската полза от цялата тази обработка и да получите по-голям 24-мегапикселов кадър в процес. Помислете за портрети на хора, архитектура и пейзажи сутрин или здрач.

Това означава, че Apple може да постави Deep Fusion като опция за „включване / изключване“ в менютата на камерата (с предупреждение за допълнителното място за съхранение на неговите 24-мегапикселови снимки) или подобно на Google го превърнете в една от основните камери режими. Ще разберем „тази есен“, която е датата на пускане на Apple, когато Deep Fusion ще пристигне на iPhone 11 Pro и Pro Max като актуализация на софтуера.

Забавянето и неяснотата на Apple около Deep Fusion несъмнено са свързани с предстоящото обявяване на Пиксел 4, който ще пристигне в средата на октомври 2019 г. Защо да показвате всичките си карти само за да бъдете изтласкани от новата „изчислителна луда наука“ на Google, както Apple самодоволно нарече новата си функция на камерата?

Но в подробностите за Deep Fusion има достатъчно обещание, което да подскаже, че ще стане, ако не и точно прескачане съперници, поне позволяват на iPhone 11 Pro да се изравнява с тях при снимки с по-ниска осветеност, като същевременно запазва лидерството си видео.

Apple рядко е била първа с някоя нова технология. Това, което обикновено прави, е да усъвършенства съществуващите неща - както направи с портретен режим на iPhone 7 Plus - след това ги пуснете, когато наистина са готови за праймтайма, като в същото време се разхождат как са били на първо място заедно.

Google все още е на мястото, когато става въпрос за изчислителна фотография, но с Deep Fusion изглежда, че Apple най-накрая се готви да се ангажира изцяло с партито. Със силна платформа под формата на чип A13 Bionic и обещание за приложения като Filmic Pro и Halide tap в своите фотографски сили, iPhone 11 Pro може най-накрая да види Apple да го настигне с конкуренти като входящия Pixel 4.