Microsoft Research desenvolve correção baseada em IA para imagens desfocadas devido a câmeras Under-Display

Após o sucesso da câmera frontal perfurada, o próximo grande desenvolvimento para câmeras selfie são câmeras totalmente subexibidas, onde as câmeras estão atrás de uma tela OLED transparente que ainda funcionaria como uma tela normal quando não estiver ativa, mas que permitir a passagem de luz suficiente para permitir que a câmera embaixo tire uma foto utilizável.

É o último aspecto que tem sido um problema e que a Microsoft Research vem investigando.

Eles observam que a difração da estrutura de pixels da tela pode desfocar a imagem, reduzir o contraste, reduzir os níveis de luz utilizáveis ​​e até obstruir completamente o conteúdo da imagem, de maneiras que dependem do design de pixels de exibição do dispositivo.

Felizmente, a degradação acontece de forma previsível e devido à estrutura de pixels geralmente apenas na direção horizontal.

Para compensar a degradação da imagem inerente à fotografia através de uma tela T-OLED, os pesquisadores usaram uma estrutura de rede neural U-Net que melhora a relação sinal-ruído e desfoca a imagem. A equipe conseguiu obter uma imagem recuperada que é praticamente indistinguível de uma imagem que foi fotografada diretamente.

A melhoria pode ser vista na imagem de exemplo abaixo:

Original, fotografado normalmente:

Fotografado através de uma tela T-OLED:

Após a recuperação da imagem:

Envolver a IA na captura de imagens também permite outras técnicas interessantes, como desfocar ou substituir o plano de fundo e outras técnicas de manipulação de vídeo que permitem chamadas de vídeo melhores e mais naturais.

A Microsoft parece estar desenvolvendo o trabalho principalmente para uso em telas maiores em configurações de videoconferência, mas tenho certeza de que se aplicaria igualmente ao seu próximo smartphone principal.

Leia mais sobre o projeto na Microsoft SUA PARTICIPAÇÃO FAZ A DIFERENÇA.

via WalkingCat