TrueDepth w iPhonie X to coś więcej niż rozpoznawanie twarzy i animowane emotki

System TrueDepth znajduje się w kontrowersyjnym wycięciu w ekranie iPhone'a X. Składa się z 3 elementów:

• rzutnik punktów — moduł wyświetlający na twarzy 30 000 niewidzialnych punktów tworzących mapę 3D;
• kamera na podczerwień — komponent odczytujący układ punktów;
• oświetlacz podczerwieni — dioda emitująca światło podczerwone pozwalające zidentyfikować twarz nawet w całkowitej ciemności.

Właśnie ten aparat wykorzystywany jest do rozpoznawania twarzy przez Face ID...

... czy wykrywania mimiki przez funkcję Animoji.

Możliwości TrueDepth na tym się jednak nie kończą.

Tryb portretowy zadebiutował wraz z iPhone'em 7 Plus. Wykorzystuje on podwójny aparat do zbierania informacji o głębi i cyfrowego rozmywania tła za fotografowanym obiektem.

Mimo iż iPhone X ma podwójny aparat tylko z tyłu, wszystkie jego portretowe funkcje dostępne są także w kamerce przedniej. Dzięki aparatowi TrueDepth, telefon podczas robienia selfie potrafi rozmyć tło oraz symulować oświetlenie studyjne.

Bardzo tę funkcję polubiłem, bo moim zdaniem tego typu efekty mają więcej sensu w przypadku aparatu przedniego (selfie) niż głównego. Co prawda tryb oświetlenia studyjnego wciąż znajduje się w fazie beta, więc efekty nie są jeszcze idealne, ale potencjał jest.

Aparat TrueDepth śledzi niezależnie ponad 50 fragmentów twarzy. Dzięki temu wykrywa w czasie rzeczywistym nie tylko pozycję i kształt twarzy, ale i mimikę. Deweloperzy mogą wykorzystywać tę funkcję w swoich apkach.

W aplikacji AR MeasureKit pojawił się ostatnio tryb pokazujący, jak dokładnie wygląda śledzenie twarzy przez przedni aparat iPhone'a X.

Platforma rozszerzonej rzeczywistości ARKit pozwala aparatowi wykrywać przestrzeń i nakładać wirtualne obiekty na obraz nachodzący z kamery. Dotychczas działał on jednak tylko w przypadku aparatu głównego.

Dzięki TrueDepth, programiści mogą wykorzystywać platformę ARKit także w przypadku aparatu przedniego. Wkrótce zaktualizowany ma zostać Snapchat, dzięki czemu jego popularne filtry mają być nakładane na twarz znacznie bardziej precyzyjnie niż dotychczas.

Amerykański producent okularów Warby Parker zaktualizował natomiast swoją aplikację o funkcję rekomendowania okularów. Aplikacja skanuje twarz użytkownika, a następnie poleca najbardziej dopasowane okulary.

Podejrzewam, że w przyszłości zostanie dodana także funkcja "przymierzania" okularów; wirtualny model 3D może być przecież nakładany na twarz.

iPhone X dostępny jest na rynku dopiero od kilku dni, więc deweloperzy dopiero zabrali się za sprawdzanie możliwości nowych zabawek. TrueDepth ma jednak ogromny potencjał (zwłaszcza w połączeniu z ARKit), więc w ciągu kilku miesięcy doczekamy się zapewne wysypu interesujących aplikacji i gier.