マイクロソフトはスクリーン下のカメラ技術の最大の問題の解決策を見つけた

「ウサギの耳」、「穴あき」、さらには「ポップアウト」クラスターに配置されたカメラの成功を受けて、スマートフォン メーカーがこのセルフィー カメラ クラスターで目指す次の目標は、ディスプレイ パネルの直下に統合することです。スマートフォンの耐水性を損なう格納式デザインを使用する必要性を回避しながら、100% の「フルビュー」画面を確保します。

基本的に、フロントカメラクラスターは透明なOLEDスクリーンの下に配置されます。このパネルは通常の画面として機能しますが、ユーザーがセルフィー カメラを起動すると、下のカメラ センサーが機能するのに十分な光が通過できるようになります。

アイデアとしてはそのようなものですが、この技術は大きな問題に直面しています。それは、スクリーンのピクセル構造からの回折により写真の品質が低下し、画像がぼやけ、コントラストが低下し、反射が発生し、使用可能な光レベルが減少し、さらには画面の一部の細部が完全に消えてしまう可能性があるということです。写真。問題の重大度は、画面の表示ピクセル設計によって異なります。

通常のカメラと画面下のカメラで撮影した写真

幸いなことに、ピクセル構造が通常水平方向を向いているため、上記の影響は予測可能な方法で発生し、Microsoft Research の研究者は、人工知能 (AI) アルゴリズムを使用するという問題の解決策を見つけたようです。

T-OLED ディスプレイを介して画像をキャプチャする際に固有の画質の損失を補うために、研究者らは U-Net ニューラル ネットワーク構造を使用しました。これにより、信号対雑音比が改善されるだけでなく、画像がぼやける現象も修正できます。 。最終的な結果は、画面下カメラで撮影した写真の品質が通常のカメラで撮影した写真と同等であることを示しています。

改善は以下のサンプル画像で確認できます。

オリジナル

T-OLED スクリーン経由で撮影した写真:

修復後の写真

モバイル写真における AI の助けは、背景をぼかしたり置き換えたりするなど、他の多くの興味深い技術や、詳細なビデオ処理技術ももたらします。これにより、スマートフォンの小型センサーシステムから撮影された写真の品質がますます向上します。