Microsoft Research dezvoltă soluții bazate pe inteligență artificială pentru imaginile încețoșate din cauza camerelor sub afișaj

După succesul camerei frontale cu perforare, următoarea dezvoltare majoră pentru camerele selfie sunt camerele complet sub afișaj, unde camerele sunt în spatele unui ecran OLED transparent care ar funcționa în continuare ca un afișaj normal atunci când nu este activ, dar care ar permiteți suficientă lumină pentru a permite camerei de dedesubt să facă o fotografie utilizabilă.

Este ultimul aspect care a fost o problemă și pe care Microsoft Research l-a investigat.

Ei observă că difracția din structura pixelilor ecranului poate estompa imaginea, reduce contrastul, reduce nivelurile de lumină utilizabile și chiar poate obstrucționa în întregime anumite conținuturi ale imaginii, în moduri care depind de designul pixelilor de afișare al dispozitivului.

Din fericire, degradarea are loc într-un mod previzibil și datorită structurii pixelilor în general numai în direcția orizontală.

Pentru a compensa degradarea imaginii inerentă fotografierii printr-un ecran T-OLED, cercetătorii au folosit o structură de rețea neuronală U-Net care îmbunătățește raportul semnal-zgomot și detoxează imaginea. Echipa a reușit să obțină o imagine recuperată care este practic imposibil de distins de o imagine care a fost fotografiată direct.

Îmbunătățirea poate fi văzută în exemplul de imagine de mai jos:

Original, fotografiat normal:

Fotografiat printr-un ecran T-OLED:

După recuperarea imaginii:

Implicarea AI în captarea imaginilor permite, de asemenea, alte tehnici interesante, cum ar fi estomparea sau înlocuirea fundalului și alte tehnici de manipulare video, care permit apeluri video mai bune și mai naturale.

Microsoft pare să dezvolte lucrarea în primul rând pentru utilizarea pe ecrane mai mari în setările de videoconferință, dar sunt sigur că s-ar aplica în mod egal și următorului tău smartphone emblematic.

Citiți mai multe despre proiect la Microsoft aici.

de WalkingCat