Opinia: dlaczego Deep Fusion z iPhone'a 11 Pro może uczynić go rywalem Pixel 4

Aparaty w iPhone'ach Apple'a od lat pozostają w tyle za swoimi rywalami o kilka kroków - i uznanie szumu „podkręć go do 11” wokół nowych możliwości fotograficznych iPhone'a 11 Pro że.

Więc teraz, wczorajsze pole zniekształcenia rzeczywistości wygasło, czy Apple naprawdę udało się wypełnić lukę fotograficzną między swoimi iPhone'ami a podobnymi do Google Pixels?

Myślę, że ma duże szanse, a głównym powodem jest to, że jego „Deep Fusion” (i w mniejszym stopniu „Night Mode”) oznacza, że wreszcie przejmuje Google we własnej komputerowej grze fotograficznej - z dodatkową pomocą kilku tradycyjnych rozwiązań Apple Zalety.

Oczywiście ten dawno spóźniony „tryb nocny” to po prostu przypadek spóźnionej wymiany figur szachowych firmy Apple z „Night Sight” Google. Dostępne na wszystkich nowych iPhone'ach, w tym tańszych iPhone 11, ten tryb wydaje się działać w identyczny sposób jak Pixel 3, łącząc ze sobą wiele obrazów, aby rozjaśnić nocne sceny i zredukować szum.

Tryb nocny Apple również wykorzystuje adaptacyjny braketing, co oznacza, że ​​skróci czas ekspozycji każdej klatki, jeśli wykryje ruch w ujęciu. Oznacza to, że podobnie jak na

Pixel 4, mógłby być przydatnym trybem poza nocnymi scenami - rozpoznawalny, super czysty wygląd Google Funkcja „Night Sight” staje się coraz bardziej powszechna, ponieważ ludzie nauczyli się kochać jego wszechstronność poza głęboką czernią sceny.

Związane z: iPhone 11 Pro i iPhone 11 Pro Max: data premiery, cena i specyfikacje

Deep Fusion: Jak to działa

Ale tryby nocne nie są niczym nowym. Bardziej ekscytującą funkcją jest niewątpliwie „Deep Fusion”. To prawda, to kolejny absurdalny termin marketingowy Apple, który należy umieścić obok wyświetlaczy Retina i będzie dostępny tylko po późniejszej aktualizacji oprogramowania układowego. Jednak (stosunkowo rzadki) opis Apple, jak to działa, sugeruje, że może to pomóc iPhone'om przynajmniej wypełnić lukę w porównaniu z ich rywalami z Google i Huawei.

„Deep Fusion” nie jest kolejnym „trybem nocnym” (jak widzieliśmy, Apple już to ma). Zamiast tego brzmi znacznie bardziej jak technika super rozdzielczości, której Google używał wcześniej w swoim Super Res Zoom. Nie oznacza to, że Apple będzie go używać do powiększania - ma już do tego teleobiektyw 52 mm - ale zamiast tego do tworzenia wysokiej jakości 24-megapikselowych obrazów o wysokiej rozdzielczości, których czujnik po prostu nie jest w stanie odtworzyć na swoim posiadać.

Jak więc działa Deep Fusion? Podobnie jak technika super rozdzielczości Google, wykorzystuje potężny potok przetwarzania obrazu, aby połączyć zalety HDR ze sztuczką Pixel Shift, którą można spotkać w większych aparatach, takich jak Sony A7R IV. Rezultat, w pewnych sytuacjach, powinien teoretycznie dać najlepsze jak dotąd zdjęcia z iPhone'a i jedne z najlepszych, jakie widzieliśmy ze smartfona.

Podobnie jak w przypadku Pixela, „Deep Fusion” zobaczy iPhone 11 Pro ciągłe buforowanie kilku obrazów w oczekiwaniu na naciśnięcie migawki, odrzucanie nieużywanych, aby zrobić miejsce na nowe klatki. Tryb HDR + Pixela buforuje obecnie do 15 obrazów, podczas gdy iPhone 11 Pro zrobi to z dziewięcioma - Według Apple będzie to składać się z czterech krótkich obrazów, czterech „drugorzędnych” obrazów oraz ostatniej migawki naciśnij.

Jak dotąd, tak Smart HDR, choć z dwukrotnie większą liczbą buforowanych obrazów. Ale tam, gdzie Deep Fusion idzie o krok dalej, jest ostatnie naciśnięcie migawki, czyli jedna dłuższa ekspozycja, i sposób, w jaki zdjęcie jest następnie składane.

Po pierwsze, w przeciwieństwie do trybów nocnych, Deep Fusion będzie najwyraźniej procesem czasu rzeczywistego. Dzięki stosunkowo krótkiemu czasowi otwarcia migawki buforowanych klatek nie trzeba czekać nieruchomo i czekać, aż aparat zrobi serię. Będzie po prostu dłuższy czas naświetlania po naciśnięciu migawki, a także sekundę, jaką zajmie jej silnik neuronowy, aby go przetworzyć.

To ostatnie jest również kolejną kluczową różnicą w stosunku do HDR - iPhone 11 Pro nie będzie tylko uśredniał zebrane klatki, ale raczej składanie większego 24-megapikselowego obrazu piksel po pikselu, prawdopodobnie przy pomocy OIS, „w celu optymalizacji pod kątem szczegółów i niskiego hałas".

Nie jest jasne, jak to zrobi, ale przydałoby się zastosowanie techniki Google polegającej na rozbiciu każdej klatki na tysiące fragmentów, wyrównywaniu ich, a następnie wykonaniu dodatkowego przetwarzania na wierzchu. Oznaczałoby to, że drobne ruchy sceny nie powinny pojawiać się jako rozmycie, co czyni go bardziej wszechstronnym trybem, a nie tylko sztuczką.

Tak czy inaczej, powodem, dla którego Deep Fusion jest tak ważna, jest to, że nie jest to tylko niszowa funkcja podrzędna, jak oświetlenie portretowe Apple - to cały system przetwarzania obrazu, który prawdopodobnie połączy moc OIS, chip A13 Bionic, układanie ekspozycji i uczenie maszynowe w stylu Google (plus, być może nawet wszystkie trzy soczewki, jak krążyły pogłoski), aby wypełnić lukę w nadchodzącym Pixel 4.

Związane z: Pixel 4 potrzebuje tej funkcji aparatu - i nie ma to nic wspólnego z fotografią

Reakcja syntezy

W jakich więc sytuacjach przyda się Deep Fusion? Przykładowe zdjęcie portretowe, którego użył Apple (poniżej), zawierało „od niskiego do średniego światła” i wydaje się, że jest to najlepszy scenariusz - nie tak ciemno, żebyś potrzebujesz trybu nocnego, ale na tyle trudnego, że zobaczysz rzeczywistą korzyść z całego tego przetwarzania i uzyskasz większe 24-megapikselowe zdjęcie w proces. Pomyśl o portretach ludzi, architekturze i krajobrazach o poranku lub o zmierzchu.

Oznacza to, że Apple może umieścić Deep Fusion jako opcję „wł. / Wył.” W menu aparatu (z ostrzeżeniem o dodatkowej pamięci, której będą potrzebować 24-megapikselowe zdjęcia) lub, tak jak Google, uczyń go jednym z głównych aparatów tryby. Dowiemy się „tej jesieni”, czyli daty premiery Apple, kiedy Deep Fusion pojawi się na iPhonie 11 Pro i Pro Max jako aktualizacja oprogramowania.

Opóźnienie i niejasność Apple wokół Deep Fusion jest niewątpliwie związana z rychłym ogłoszeniem Pixel 4, który pojawi się w połowie października 2019 r. Po co pokazywać wszystkie swoje karty tylko po to, by dać się ponieść nowej „szalonej nauce obliczeniowej” Google, jak z satysfakcją Apple nazwał swoją nową funkcję aparatu?

Ale w szczegółach Deep Fusion jest wystarczająco dużo obietnic, by zasugerować, że zamierza, jeśli nie dokładnie, przeskoczyć rywale, przynajmniej pozwól iPhone'owi 11 Pro zrównać się z nimi na słabszych zdjęciach, zachowując jednocześnie przewagę wideo.

Apple rzadko kiedy jako pierwszy wprowadzał jakąkolwiek nową technologię. Zwykle udoskonala istniejące rzeczy - tak jak w przypadku trybu portretowego na iPhonie 7 Plus - a potem wypuść je, gdy będą naprawdę gotowe na najlepszą oglądalność, jednocześnie wiejąc o tym, jacy byli na początku wzdłuż.

Google nadal zajmuje pierwsze miejsce, jeśli chodzi o fotografię obliczeniową, ale dzięki Deep Fusion wygląda na to, że Apple w końcu przygotowuje się do pełnego zaangażowania się w imprezę. Z mocną platformą w postaci chipa A13 Bionic i obietnicą aplikacji takich jak Filmic Pro i Halide tapping w swoich fotograficznych możliwościach iPhone 11 Pro może wreszcie zobaczyć, jak Apple dogoni go z rywalami, takimi jak nadchodzący Pixel 4.