Microsoft Researchは、アンダーディスプレイカメラが原因でぼやけた画像のAIベースの修正を開発しています

パンチホール前面カメラの成功後、セルフィーカメラの次の主要な開発は完全にアンダーディスプレイカメラです。カメラは透明なOLEDスクリーンの後ろにあり、アクティブでないときは通常のディスプレイとして機能しますが、下のカメラが使用可能な写真を撮れるように、十分な光を通します。

これは、問題になっている最後の側面であり、MicrosoftResearchが調査しているものです。

彼らは、画面のピクセル構造からの回折により、デバイスのディスプレイピクセルの設計に依存する方法で、画像がぼやけ、コントラストが低下し、使用可能な光レベルが低下し、一部の画像コンテンツが完全に遮られる可能性があることを指摘しています。

幸いなことに、劣化は予測可能な方法で発生し、ピクセル構造が一般的に水平方向にのみ発生します。

T-OLEDスクリーンを介した写真撮影に固有の画像劣化を補正するために、研究者は、信号対雑音比を改善し、画像のぼけを除去するU-Netニューラルネットワーク構造を使用しました。 チームは、直接撮影された画像と実質的に区別がつかない復元された画像を実現することができました。

以下のサンプル画像で改善を確認できます。

オリジナル、通常の写真：

T-OLEDスクリーンを通して撮影：

イメージリカバリ後：

AIを画像キャプチャに含めることで、背景をぼかしたり置き換えたりするなどの他の興味深い手法や、より優れたより自然なビデオ通話を可能にする他のビデオ操作手法も可能になります。

Microsoftは、主にビデオ会議設定の大画面で使用するための作業を開発しているようですが、次の主力スマートフォンにも同様に適用されると確信しています。

Microsoftでプロジェクトについてもっと読む こちら.

、 ウォーキングキャット