Η Microsoft Research αναπτύσσει επιδιόρθωση βασισμένη σε τεχνητή νοημοσύνη για θολές εικόνες λόγω των καμερών κάτω από την οθόνη

Μετά την επιτυχία της μπροστινής κάμερας με διάτρηση, η επόμενη σημαντική εξέλιξη για τις κάμερες selfie είναι οι κάμερες πλήρως κάτω από την οθόνη, όπου οι κάμερες βρίσκονται πίσω από μια διαφανή οθόνη OLED η οποία θα εξακολουθούσε να λειτουργεί ως κανονική οθόνη όταν δεν είναι ενεργή, αλλά αφήστε αρκετό φως να περάσει για να επιτρέψετε στην κάμερα από κάτω να τραβήξει μια χρήσιμη φωτογραφία.

Είναι η τελευταία πτυχή που υπήρξε πρόβλημα και την οποία διερευνά η Microsoft Research.

Σημειώνουν ότι η περίθλαση από τη δομή των pixel της οθόνης μπορεί να θολώσει την εικόνα, να μειώσει την αντίθεση, να μειώσει τα χρησιμοποιήσιμα επίπεδα φωτός και ακόμη και να εμποδίσει εντελώς κάποιο περιεχόμενο εικόνας, με τρόπους που εξαρτώνται από τη σχεδίαση εικονοστοιχείων οθόνης της συσκευής.

Ευτυχώς, η υποβάθμιση συμβαίνει με προβλέψιμο τρόπο και λόγω της δομής των εικονοστοιχείων γενικά μόνο στην οριζόντια κατεύθυνση.

Για να αντισταθμίσουν την υποβάθμιση της εικόνας που είναι εγγενής στη φωτογράφιση μέσω μιας οθόνης T-OLED, οι ερευνητές χρησιμοποίησαν μια δομή νευρωνικού δικτύου U-Net που βελτιώνει την αναλογία σήματος προς θόρυβο και αποθολώνει την εικόνα. Η ομάδα κατάφερε να επιτύχει μια ανακτημένη εικόνα που ουσιαστικά δεν διακρίνεται από μια εικόνα που φωτογραφήθηκε απευθείας.

Η βελτίωση φαίνεται στην παρακάτω εικόνα δείγματος:

Πρωτότυπο, φωτογραφημένο κανονικά:

Φωτογραφήθηκε μέσω οθόνης T-OLED:

Μετά την ανάκτηση εικόνας:

Η συμμετοχή της τεχνητής νοημοσύνης στη λήψη εικόνων επιτρέπει επίσης άλλες ενδιαφέρουσες τεχνικές, όπως το θάμπωμα ή την αντικατάσταση του φόντου και άλλες τεχνικές χειρισμού βίντεο που επιτρέπουν καλύτερες και πιο φυσικές βιντεοκλήσεις.

Η Microsoft φαίνεται να αναπτύσσει το έργο κυρίως για χρήση σε μεγαλύτερες οθόνες σε ρυθμίσεις τηλεδιάσκεψης, αλλά είμαι βέβαιος ότι θα ισχύει εξίσου και για το επόμενο κορυφαίο smartphone σας.

Διαβάστε περισσότερα για το έργο στη Microsoft εδώ.

μέσω WalkingCat