Microsoft znalazł rozwiązanie największego problemu technologii kamer podekranowych

Po sukcesie aparatów umieszczonych w klastrach typu „królicze uszy”, „dziurkowanych”, a nawet „wyskakujących”, kolejnym celem, do jakiego dążą producenci smartfonów tworząc ten zestaw aparatów do selfie, jest integracja. Znajduje się on tuż pod panelem wyświetlacza, zapewnienie ekranu w 100% „pełnego widoku”, unikając jednocześnie konieczności stosowania wysuwanej konstrukcji, która powoduje, że smartfon traci wodoodporność.

Zasadniczo przedni klaster aparatu zostanie umieszczony pod przezroczystym ekranem OLED. Panel ten może nadal działać jak normalny ekran, ale gdy użytkownik aktywuje aparat do selfie, przepuszcza wystarczającą ilość światła, aby czujnik aparatu poniżej mógł działać.

Pomysł jest taki, jednak technologia ta boryka się z dużym problemem, a mianowicie dyfrakcja od struktury pikseli ekranu może obniżyć jakość zdjęcia, powodując rozmycie obrazu, zmniejszenie kontrastu, odbicia światła, zmniejszenie użytecznego poziomu światła, a nawet całkowite zapomnienie niektórych szczegółów w obrazie. zdjęcie. Waga problemu zależy od konstrukcji pikseli ekranu.

Zdjęcia robione zwykłym aparatem i aparatem pod ekranem

Na szczęście powyższe efekty występują w przewidywalny sposób ze względu na strukturę pikseli zwykle skierowaną poziomo, a badacze z Microsoft Research wydają się znaleźć rozwiązanie problemu, którym jest wykorzystanie algorytmów sztucznej inteligencji (AI).

Aby zrekompensować utratę jakości obrazu związaną z przechwytywaniem obrazów za pomocą wyświetlacza T-OLED, badacze wykorzystali strukturę sieci neuronowej U-Net, która nie tylko poprawia stosunek sygnału do szumu, ale może także naprawić zjawisko rozmycia obrazów . Efekt końcowy pokazuje, że zdjęcie zrobione aparatem pod ekranem ma jakość nie gorszą od zdjęcia zrobionego zwykłym aparatem.

Poprawę można zobaczyć na przykładowym obrazie poniżej:

Oryginalny

Zdjęcie zrobione na ekranie T-OLED:

Zdjęcie po renowacji

Pomoc AI w fotografii mobilnej niesie ze sobą także wiele innych ciekawych technik takich jak rozmywanie czy podmienianie tła, a także techniki dogłębnego przetwarzania wideo. Dzięki temu jakość zdjęć robionych za pomocą kompaktowych czujników w smartfonach staje się coraz wyższa.