Microsoft Research mengembangkan perbaikan berbasis AI untuk gambar buram karena kamera Under-Display

Setelah kesuksesan kamera depan punch-hole, perkembangan besar berikutnya untuk kamera selfie adalah kamera di bawah layar sepenuhnya, di mana kamera berada di belakang layar OLED transparan yang masih berfungsi sebagai tampilan normal saat tidak aktif, tetapi akan tetap berfungsi sebagai tampilan normal. biarkan cahaya yang cukup masuk untuk memungkinkan kamera di bawahnya mengambil gambar yang dapat digunakan.

Ini adalah aspek terakhir yang menjadi masalah, dan yang telah diselidiki oleh Microsoft Research.

Mereka mencatat bahwa difraksi dari struktur piksel layar dapat mengaburkan gambar, mengurangi kontras, mengurangi tingkat cahaya yang dapat digunakan, dan bahkan menghalangi sebagian konten gambar sepenuhnya, dengan cara yang bergantung pada desain piksel tampilan perangkat.

Untungnya, degradasi terjadi dengan cara yang dapat diprediksi dan karena struktur piksel umumnya hanya dalam arah horizontal.

Untuk mengimbangi degradasi gambar yang melekat dalam memotret melalui layar T-OLED, para peneliti menggunakan struktur jaringan saraf U-Net yang meningkatkan rasio signal-to-noise dan mengaburkan gambar. Tim mampu mencapai gambar pulih yang hampir tidak dapat dibedakan dari gambar yang difoto secara langsung.

Peningkatan tersebut dapat dilihat pada contoh gambar di bawah ini:

Asli, difoto biasanya:

Difoto melalui layar T-OLED:

Setelah pemulihan gambar:

Melibatkan AI dalam pengambilan gambar juga memungkinkan teknik menarik lainnya seperti mengaburkan atau mengganti latar belakang dan teknik manipulasi video lainnya yang memungkinkan panggilan video yang lebih baik dan lebih alami.

Microsoft tampaknya mengembangkan pekerjaan terutama untuk digunakan di layar yang lebih besar dalam pengaturan konferensi video, tetapi saya yakin itu akan berlaku sama untuk smartphone andalan Anda berikutnya.

Baca lebih lanjut tentang proyek di Microsoft di sini.

melalui WalkingCat