Sztuczna inteligencja a fotografia mobilna. Jak inteligentne algorytmy zmienią zdjęcia robione smartfonem

Smartfony z generacji na generację robią coraz lepsze zdjęcia, ale nie jest to zasługa wyłącznie sprzętowych udoskonaleń. Pod względem hardware'owym postęp jest niewielki, bo rozmiar telefonów daje producentom niewielkie pole do popisu. Fizykę da się jednak oszukać.

Sztuczny bokeh

Świetnym przykładem tego, w jaki sposób oprogramowanie pozwala obejść fizyczne ograniczenia smartfonowych aparatów jest popularny ostatnio efekt bokeh. Stosowane w mobilnych urządzeniach komponenty są zbyt małe, by pozwoliły uzyskać ładne, soczewkowe rozmycie tła podczas fotografowania z odległości większych niż kilkanaście centymetrów.

Producenci znaleźli na to sposób — wiele popularnych telefonów potrafi rozmyć tło cyfrowo. Smartfon jest "uczony" rozpoznawania obiektów w kadrze i wykrywania pierwszego planu, w czym często pomaga drugi aparat. Fotografowany obiekt może dzięki temu zostać precyzyjnie wycięty z kadru, a cała reszta rozmyta.

Już teraz zdjęcia robione telefonami wyglądają prawie jak z lustrzanki. Zapewne jeszcze trochę i będę mógł usunąć z tego zdania wyraz "prawie".

Poprawa jakości zdjęć

Od dawna oprogramowanie telefonu ma nie mniejszy wpływ na jakość zdjęć niż zastosowany hardware. A może nawet i większy. W ostatnich latach trend ten się nasila, dlatego obecnie praktycznie żaden sprzętowy parametr — wielkość matrycy, rozdzielczość czy jakość zastosowanej optyki — nie oddaje fotograficznych możliwości urządzenia. Najważniejsze są zastosowane algorytmy, które odpowiadają za nasycenie kolorów, usunięcie szumów itp.

Na tym polu da się jeszcze wiele poprawić, co udowodniła firma Macphun. Jej desktopowy program do edycji zdjęć został niedawno wzbogacony o technologię Accent — AI Filter. Specjalne algorytmy analizują obiekty na zdjęciu, jego strukturę, kolory i wiele innych aspektów w celu poprawy jakości fotografii. Rezultaty są naprawdę imponujące.

Poniższe kiepskiej jakości zdjęcie zrobiłem pięć lat temu smartfonem Galaxy S II, który swoimi fotograficznymi możliwościami ustępuje dzisiejszym standardom. Wystarczyło jednak przepuścić to zdjęcie przez Accent — AI Filter i nagle staje się ono całkiem przyjemne dla oka.

Zobacz również: LG G Watch R

Kwestia czasu aż algorytmy potrafiące odratować nawet naprawdę fatalne fotki zostaną zaimplementowane w smartfonach. Tego bowiem oczekują konsumenci — by zdjęcie wyglądało ładnie od razu po zrobieniu, a nie późniejszej obróbce.

Niechciane obiekty na zdjęciu? Żaden problem

Przechodzień zasłaniający fotografowany budynek, niefortunnie zaparkowany samochód, czyjś kapelusz uchwycony w kadrze — takie rzeczy potrafią nieodwracalnie popsuć nawet najlepsze zdjęcie. Cóż, nie do końca nieodwracalnie.

Z usuwaniem niechcianych obiektów można sobie radzić na wiele sposobów. Niektóre programy graficzne wykorzystują sąsiadujące piksele do wypełnienia pustej przestrzeni po usuniętym fragmencie zdjęcia. Galaxy S4 potrafił natomiast zrobić kilka zdjęć pod rząd i połączyć ich fragmenty w taki sposób, by na finalnej fotce nie było widać np. przejeżdżającego samochodu.

Uczenie maszynowe może wnieść usuwanie obiektów na zupełnie nowy poziom

Podczas imprezy Google I/O 2017 gigant zapowiedział oparty na uczeniu maszynowym algorytm, który ma być w stanie z niespotykaną dotąd dokładnością pozbywać się niechcianych obiektów ze zdjęć.

Dzięki temu, że zdjęcie nie jest już dla komputera tylko nic nie znaczącym zlepkiem kolorowych punktów, będzie on w stanie "domyślić się", co dokładnie znajduje się w zasłoniętych partiach fotografii. Dokładnie tak jak zrobiłby to człowiek, bo każdy z nas po spojrzeniu na powyższe zdjęcie potrafiłby zwizualizować sobie, co znajduje się w miejscach za siatką. Gdy algorytm się tego nauczy, w połączeniu z narzędziami graficznymi będzie w stanie zdziałać cuda.

Zoom cyfrowy czy optyczny? Jest też trzecia opcja

Chcąc w dużym stopniu przybliżyć fragment kadru, najlepiej jest zastosować zoom optyczny, ale ten wymaga zachowania dużego odstępu między soczewkami. To w przypadku telefonów nie jest mile widziane, bo w znacznym stopniu pogrubiłoby urządzenie.

Galaxy K Zoom z zoomem optycznym

Alternatywą jest zoom cyfrowy, ale aby ten był możliwie jak najmniej stratny, konieczne jest zastosowanie dużej matrycy o wysokiej rozdzielczości, co także wpływa na gabaryty telefonu.

Lumia 1020 z "bezstratnym" zoomem cyfrowym

Tymczasem Google pracuje nad technologią RAISR (Rapid and Accurate Image Super-Resolution), która potrafi w czasie rzeczywistym wyostrzyć rozpikselowane zdjęcie. Dzięki temu nawet bez soczewki przybliżającej i matrycy o wysokiej rozdzielczości możliwe będzie mocne wykadrowanie zdjęcia bez odczuwalnego spadku jakości.

Pokaz możliwości technologii RAISR

Jak to działa? Przez algorytm przepuszcza się setki tysięcy par zdjęć, z który jedno jest dobrej, a drugie złej jakości. Program uczy się dzięki temu, w jaki sposób uzupełniać brakujące piksele, by poprawić jakość fotografii. Oprogramowanie zaczyna rozumieć, że te ząbkowane kreski nad oczami to brwi, które powinny być gładkie.

Pokaz możliwości technologii RAISR

Tego typu algorytmy, gdy zostaną dopracowane do perfekcji, będą miały ogromne znacznie w przyszłości, gdy miniaturyzacja elektroniki wkroczy na kolejny poziom. Za 10 lat zdjęcia możemy przecież robić nie relatywnie dużymi telefonami, lecz okularami.

Selfie wolne od zniekształceń

Zapewne zauważyliście, że ludzie wyglądają na selfie inaczej niż portretach czy zdjęciach robionych z większych odległości. Wpływ na to ma zbyt mała odległość twarzy od obiektywu. Przez to, że nos znajduje się dużo bliżej aparatu niż czoło czy uszy, zdaje się być uwypuklony, a osoba na zdjęciu wygląda jak swoja własna karykatura.

Również ten problem da się rozwiązać software'owo, co udowodniła firma Adobe. Pracuje ona nad algorytmami, które są w stanie skorygować zaburzone proporcje na selfie w taki sposób, by wyglądało na zrobione obiektywem portretowym.

Wykorzystywana jest platforma sztucznej inteligencji Adobe Sensei, która po przeanalizowaniu setek tysięcy zdjęć jest w stanie dostrzec prawidłowe wzorce i dzięki temu usunąć niedoskonałości.

Co przyniesie przyszłość?

Jeśli chodzi o wykorzystanie uczenia maszynowego w fotografii, postęp jest tak duży, że — kto wie — może w przyszłości praktycznie w ogóle nie będziemy potrzebowali profesjonalnych aparatów, wymiennych obiektywów, statywów, gimbali czy oświetlenia.

Wszystko to może zastąpić sztuczna inteligencja. Jak widać, ten proces rozpoczął się już na dobre.

Podziel się:

Przeczytaj także:

Także w kategorii Aktualności:

Huawei Mate 10 na pierwszej wiarygodnej wizualizacji. Szału nie ma, ale Huawei może mieć jeszcze asa w rękawie #wSkrócie: nowe wieści o Xiaomi Mi MIX 2, Netflix w HDR na Galaxy Note 8 i bezramkowiec Gionee #wSkrócie: Android 8.0 Oreo dla nokii i opóźniona sprzedaż iPhone'a 8 Star Wars Jedi Challenges oficjalnie. Pokonałem Kylo Rena, czyli "Gwiezdne wojny" w rozszerzonej rzeczywistości ARCore, czyli mocna odpowiedź Google'a na ruch Apple'a #wSkrócie: Huawei Mate 10 z Androidem Oreo, bezramkowy Xiaomi Mi A1 i data premiery nowych iPhone'ów Jestem zaskoczony, że Samsung wciąż przypomina światu o Galaxy Nocie 7 Smartfon i papierowe okulary wystarczą, by wykryć raka trzustki #wSkrócie: Galaxy A (2018) z ekranem Infinity i podróbka iPhone'a 8 5 smartfonów, które wyjątkowo wolno się starzeją Sailfish OS dla Xperii X. To nie ma prawa się udać #wSkrócie: specyfikacja Moto X4, Oreo na HTC U11 do końca roku i Xperia XZ1 Compact na zdjęciach Galaxy Note 8 to coś więcej niż S8 z rysikiem [pierwsze wrażenia] Samsung Galaxy Note8 w przedsprzedaży. Polska cena i dodatki #wSkrócie: aparat w Huawei Mate 10, Bixby dla wszystkich oraz nowe wieści o Meizu M6 Note #wSkrócie: nietypowe moduły dla Essential Phone'a, Moto X4 na zdjęciach i niezły koncept Xiaomi MI MIX 2 Samsung Galaxy Note 8, czyli funkcjonalne dodatki kosztem wyglądu #wSkrócie: data premiery Androida O, nowy tablet Samsunga i tworzenie tapety dla LG V30 YotaPhone 3 z dwoma ekranami w rozsądnej cenie. Nie można było tak od razu? Galaxy Note 9 z alkomatem? To niegłupi pomysł, ale plany Samsunga mogły zostać źle zrozumiane #wSkrócie: najpopularniejsze smartfony w drugim kwartale oraz nowe zdjęcia LG V30, Galaxy Note'a 8 i Xperii XZ1 Compact #wSkrócie: upadek Galaxy S5 z 300 metrów, ZenFone'y 4 na zdjęciach i Google Allo na komputerach Sony Xperia XZ1: wyciekają zdjęcia, specyfikacja i jedna tajemnicza nowość #wSkrócie: wyróżnienia EISA 2017-2018, Samsung Gear Fit 2 Pro i nowe ikony w iOS 11

Popularne w tym tygodniu:

#wSkrócie: promocja dla wymieniających telefon na Galaxy S8 oraz nazwy nowych iPhone'ów Apple Watch Series 3 oficjalnie. Nie potrzebuje iPhone'a, by działać #wSkrócie: aktualizacja do iOS 11, Huawei Mate 10 na zdjęciu i nowa funkcja Gmaila Gniazdo słuchawkowe jako opcjonalne i płatne akcesorium do telefonu? Tak, to się dzieje naprawdę #wSkrócie: konferencja Apple'a na żywo, benchmarki Apple A11 i składane smartfony Samsunga #wSkrócie: Galaxy S9 z super slow motion, mobilny Amazon po polsku oraz Huawei G10 i Meizu M6 na zdjęciach #wSkrócie: Nokia 9 z Oreo, nowe statystyki Androida i spore ograniczenie Face ID Czy wycięcie w ekranie iPhone'a X bardzo irytuje? Sprawdź sam #wSkrócie: LG V30 wkrótce w sprzedaży oraz ceny nowych Pixeli i inne nowości Google'a #wSkrócie: Android 8.0 Oreo dla smartfonów Moto, Huawei Mate 10 Lite i cena części iPhone'a X #wSkrócie: data premiery Pixela 2, wygląd Nokii 2 oraz "nowy" iPhone 7 #wSkrócie: pierwsze zdjęcie Mate'a 10, Bose SoundLink Micro oraz zapowiedź ciekawego vivo X20