Większość właścicieli iPhone’ów nigdy nie zauważa, kiedy wkracza Deep Fusion. W słabo oświetlonych wnętrzach telefon po cichu rejestruje dziewięć klatek w ułamku sekundy, a następnie pozwala procesorowi zdecydować, które piksele zasługują na to, by przetrwać. Efekt nie zawsze jest najjaśniejszym ani najbardziej dramatycznym obrazem. Często jest to najbardziej teksturowane zdjęcie. To, czy taki kompromis się opłaca, zależy w dużej mierze od fotografowanego obiektu oraz od jednego pytania, które większość użytkowników nigdy sobie nie zadała.
Co to jest Deep Fusion w Twoim iPhonie?
Wprowadzona wraz z linią iPhone’ów 11 w 2019 roku, Deep Fusion to funkcja fotografii obliczeniowej, która poprawia szczegółowość i teksturę obrazu w warunkach średniego i słabego oświetlenia. Zanim migawka zostanie wyzwolona, aparat rejestruje kilka klatek o różnej ekspozycji i łączy je w jeden obraz.
Neural Engine następnie analizuje każdy piksel, sortując obszary według szczegółów, takich jak tkanina, włosy czy skóra. Przetwarza szczegóły średniej częstotliwości, które niosą większość tekstury, i łączy najlepsze informacje z każdej klatki.
Deep Fusion działa automatycznie w domyślnym trybie aparatu, bez lampy błyskowej i bez ręcznych regulacji. Jest najbardziej zauważalna w pomieszczeniach i w umiarkowanie oświetlonych scenach, gdzie szum często zaciera drobne szczegóły. W przeciwieństwie do Smart HDR nie włącza się w jasnym świetle ani w bardzo słabym oświetleniu, gdzie zamiast niej działa tryb Nocny.
Jak Deep Fusion łączy dziewięć ekspozycji
Jak aparat zbiera wystarczająco dużo danych, aby odtworzyć tak drobną teksturę? Deep Fusion odpowiada na to, rejestrując dziewięć klatek w szybkim następstwie. Osiem z nich to krótkie ekspozycje wykonane przed naciśnięciem migawki, a dziewiąta to dłuższa ekspozycja uruchamiana samym naciśnięciem. Krótkie klatki zamrażają ruch i zachowują szczegóły, natomiast długa klatka gromadzi światło i głębię kolorów.
System następnie wyrównuje klatki, aby skorygować niewielkie drgania dłoni. Jego sieć neuronowa porównuje każdy piksel w całym zestawie, wybierając najostrzejsze i najdokładniejsze wartości dla tekstury, i łączy je, aby uzyskać gładkie przejścia tonalne. Przetwarzanie trwa około sekundy na Neural Engine układu A-series. Końcowym wynikiem jest pojedynczy obraz o szczegółowości, której żadna pojedyncza klatka nie mogłaby uchwycić samodzielnie.
Kiedy Deep Fusion uruchamia się przy słabym oświetleniu?
Gdy oświetlenie otoczenia spada poniżej poziomu odpowiedniego dla Smart HDR, ale pozostaje powyżej progu dla trybu Nocnego, iPhone automatycznie stosuje Deep Fusion.
Deep Fusion zazwyczaj włącza się w następujących warunkach:
- Pomieszczenia wewnętrzne oświetlone lampami lub oprawami sufitowymi
- Sceny o zmierzchu, zanim latarnie osiągną pełną jasność
- Nieruchome obiekty, które pozwalają klatkom dobrze się wyrównać
- Powierzchnie o wyraźnej fakturze, takie jak tkaniny, włosy i ściany
Poza tym zakresem iPhone zmienia sposób działania. Jaśniejsze światło wykorzystuje Smart HDR, a ciemniejsze warunki uruchamiają tryb Nocny, który wykonuje dłuższe ekspozycje i całkowicie omija Deep Fusion. Użytkownicy nie mogą bezpośrednio włączać ani wyłączać Deep Fusion. Jego aktywacja zależy wyłącznie od pomiaru światła przez aparat w czasie rzeczywistym, więc niewielkie zmiany oświetlenia mogą przełączać tryby między kolejnymi zdjęciami. Fotografowie dążący do spójnych wyników powinni stabilizować oświetlenie.
Czy można wyłączyć Deep Fusion?
Funkcja Deep Fusion nie ma przełącznika w systemie iOS, dlatego ani aplikacja Ustawienia, ani aplikacja Aparat nie mogą jej wyłączyć. Działa automatycznie na obsługiwanych iPhone’ach, gdy aparat uzna scenę za słabo lub średnio oświetloną, i przetwarza każde zdjęcie bez informowania użytkownika.
Użytkownicy nie mogą kontrolować tej funkcji bezpośrednio, ale mogą ograniczyć jej wpływ. Fotografowanie w jasnym świetle sprawia, że aparat nie uruchamia tej funkcji. Zapisywanie zdjęć w formacie RAW za pomocą aplikacji aparatu innej firmy również omija przetwarzanie, ponieważ Deep Fusion działa na standardowych plikach HEIF. Niektórzy użytkownicy wolą jednak zaakceptować wyniki, gdyż ta funkcja zazwyczaj redukuje szum i wyostrza drobne detale. Warto sprawdzać przyszłe aktualizacje iOS pod kątem zmian.
Jak Deep Fusion różni się od Smart HDR
Choć obie funkcje łączą kilka klatek w jedno zdjęcie, Smart HDR i Deep Fusion rozwiązują różne problemy. Smart HDR koncentruje się na zrównoważeniu światła i zakresu dynamiki w całej scenie, natomiast Deep Fusion skupia się na teksturze i szczegółach przy średnim i słabym oświetleniu.
Kluczowe różnice są następujące:
- Smart HDR przetwarza cały kadr naraz, a Deep Fusion analizuje obraz piksel po pikselu.
- Smart HDR priorytetowo traktuje zakres dynamiki, a Deep Fusion priorytetowo traktuje drobną teksturę.
- Smart HDR działa przy każdym zdjęciu, natomiast Deep Fusion aktywuje się głównie przy średnim i słabym oświetleniu.
- Deep Fusion wymaga więcej czasu przetwarzania niż Smart HDR.
W praktyce Smart HDR obsługuje większość scen, a Deep Fusion udoskonala szczegóły, które Smart HDR pozostawia miękkie. Razem pozwalają aparatowi zrównoważyć ekspozycję bez utraty detali tkanin, włosów czy roślinności.
Dlaczego tekstura i drobne detale zyskują na znaczeniu
Dlaczego tekstura zanika najpierw przy słabym oświetleniu? Matryce aparatów rejestrują mniej fotonów w ciemnych scenach, więc szum rośnie, a drobne detale rozmywają się w artefakty wygładzania. Deep Fusion przeciwdziała tej utracie, analizując wiele klatek na poziomie pikseli.
Silnik neuronowy ocenia każdy region osobno i odróżnia splot tkaniny, włosy oraz pory skóry od szumu. Następnie wzmacnia szczegóły wysokiej częstotliwości, jednocześnie tłumiąc losowe ziarno, dzięki czemu zachowuje teksturę bez nadmiernego wyostrzania krawędzi.
| Element sceny | Reakcja Deep Fusion |
|---|---|
| Tkanina | Wzmocniony splot |
| Włosy | Rozdzielenie pasm |
| Skóra | Zachowanie porów |
| Roślinność | Wyraźność krawędzi liści |
Efektem jest wyraźnie bogatsze odwzorowanie materiałów w warunkach średniego oświetlenia, gdzie samo Smart HDR spłaszczyłoby te drobne struktury. Użytkownicy zauważają ostrzejsze tekstury na zdjęciach ubrań, zwierząt i krajobrazów, choć wyniki zależą od oświetlenia sceny i ruchu.
Tam, gdzie naprawdę zauważysz różnicę
Największe korzyści z przetwarzania tekstur są widoczne w warunkach średniego oświetlenia, na przykład w pomieszczeniach oświetlonych światłem z okna, w przyciemnionych restauracjach lub w pochmurne dni na zewnątrz. W takich warunkach czujnik rejestruje wystarczająco dużo szczegółów, aby Deep Fusion mogło pracować na bogatszych danych, a mimo to cienie i półtony nadal tracą wyrazistość przy standardowym przetwarzaniu.
Typowe przykłady to:
- Splot tkanin w ubraniach, na przykład w dzianinie lub denimie
- Słoje drewna na meblach i blatach stołów
- Tekstura skóry na portretach wykonanych w pobliżu okna
- Liście i kora drzew w pochmurny dzień
Poza tymi warunkami różnica jest subtelna. Jasne słońce daje systemowi mniejszą potrzebę ingerencji, natomiast bardzo słabe oświetlenie opiera się na trybie Nocnym, który inaczej obsługuje szczegóły. Porównania obok siebie powinny zatem koncentrować się na codziennych zdjęciach wnętrz wykonywanych w domu, w pobliżu okien.
Wróć do indeksu A-Z