Microsoft Research développe un correctif basé sur l'IA pour les images floues dues aux caméras sous-affichage
2 minute. lis
Publié le
Partagez cet article
Améliorer ce guide
Lisez notre page de divulgation pour savoir comment vous pouvez aider MSPoweruser à soutenir l'équipe éditoriale En savoir plus
Après le succès de la caméra frontale perforée, le prochain développement majeur pour les caméras selfie est les caméras entièrement sous-écran, où les caméras sont derrière un écran OLED transparent qui fonctionnerait toujours comme un affichage normal lorsqu'il n'est pas actif, mais qui laissez passer suffisamment de lumière pour permettre à la caméra située en dessous de prendre une photo utilisable.
C'est le dernier aspect qui a posé problème et sur lequel Microsoft Research a enquêté.
Ils notent que la diffraction de la structure de pixels de l'écran peut brouiller l'image, réduire le contraste, réduire les niveaux de lumière utilisables et même obstruer entièrement le contenu de l'image, d'une manière qui dépend de la conception des pixels d'affichage de l'appareil.
Heureusement, la dégradation se produit de manière prévisible et en raison de la structure des pixels généralement uniquement dans le sens horizontal.
Pour compenser la dégradation de l'image inhérente à la photographie via un écran T-OLED, les chercheurs ont utilisé une structure de réseau neuronal U-Net qui améliore à la fois le rapport signal sur bruit et floute l'image. L'équipe a pu obtenir une image récupérée pratiquement impossible à distinguer d'une image photographiée directement.
L'amélioration peut être vue dans l'exemple d'image ci-dessous :
Original, photographié normalement :
Photographié à travers un écran T-OLED :
Après récupération d'image :
L'implication de l'IA dans la capture d'image permet également d'autres techniques intéressantes telles que le flou ou le remplacement de l'arrière-plan et d'autres techniques de manipulation vidéo qui permettent des appels vidéo meilleurs et plus naturels.
Microsoft semble développer le travail principalement pour une utilisation sur des écrans plus grands dans les paramètres de vidéoconférence, mais je suis sûr que cela s'appliquerait également à votre prochain smartphone phare.
En savoir plus sur le projet chez Microsoft ici.
via WalkingCat
