Microsoft a trouvé une solution au plus gros problème de la technologie des caméras sous lécran

Après le succès des caméras placées dans des clusters « oreilles de lapin », « perforés » ou encore « pop-out », le prochain objectif que visent les fabricants de smartphones avec ce cluster de caméras selfie est l'intégration. assurant un écran 100 % « plein écran », tout en évitant d'avoir à utiliser un design rétractable qui fait perdre au smartphone sa résistance à l'eau.

Fondamentalement, le cluster de caméra frontale sera placé sous l’écran OLED transparent. Ce panneau peut toujours fonctionner comme un écran normal, mais lorsque l'utilisateur active la caméra selfie, il laissera passer suffisamment de lumière pour que le capteur de la caméra situé en dessous fonctionne.

L'idée est comme ça, mais cette technologie est confrontée à un gros problème, à savoir que la diffraction de la structure des pixels de l'écran peut réduire la qualité de la photo, provoquant des images floues, réduisant le contraste, la réflexion, réduisant les niveaux de lumière utilisables et même faisant disparaître complètement certains détails de l'image. photo. La gravité du problème dépend de la conception des pixels d'affichage de l'écran.

Photos prises par un appareil photo ordinaire et un appareil photo sous l'écran

Heureusement, les effets ci-dessus se produisent de manière prévisible en raison de la structure des pixels pointant généralement horizontalement, et les chercheurs de Microsoft Research semblent avoir trouvé une solution au problème, à savoir l'utilisation d'algorithmes d'intelligence artificielle (IA).

Pour compenser la perte de qualité d'image inhérente à la capture d'images via un écran T-OLED, les chercheurs ont utilisé une structure de réseau neuronal U-Net, qui non seulement améliore le rapport signal/bruit, mais peut également corriger le phénomène d'images floues. . Le résultat final montre qu'une photo prise avec l'appareil photo sous-écran n'a pas une qualité pire qu'une photo prise avec un appareil photo ordinaire.

L’amélioration est visible dans l’exemple d’image ci-dessous :

Original

Photo prise via l'écran T-OLED :

Photo après restauration

L’aide de l’IA dans la photographie mobile apporte également de nombreuses autres techniques intéressantes comme le flou ou le remplacement de l’arrière-plan, ainsi que des techniques de traitement vidéo approfondies. La qualité des photos prises à partir de systèmes de capteurs compacts sur les smartphones devient ainsi de plus en plus élevée.