Microsoft Research phát triển bản sửa lỗi dựa trên AI cho hình ảnh bị mờ do camera dưới màn hình

Sau thành công của máy ảnh mặt trước có lỗ, bước phát triển lớn tiếp theo cho máy ảnh selfie là máy ảnh dưới màn hình hoàn toàn, trong đó các máy ảnh nằm sau màn hình OLED trong suốt vẫn hoạt động như một màn hình bình thường khi không hoạt động, nhưng sẽ cho phép đủ ánh sáng để cho phép máy ảnh bên dưới chụp ảnh có thể sử dụng được.

Đây là khía cạnh cuối cùng là một vấn đề và Microsoft Research đang điều tra.

Họ lưu ý rằng nhiễu xạ từ cấu trúc pixel của màn hình có thể làm mờ hình ảnh, giảm độ tương phản, giảm mức độ ánh sáng có thể sử dụng và thậm chí cản trở hoàn toàn một số nội dung hình ảnh, theo những cách phụ thuộc vào thiết kế pixel hiển thị của thiết bị.

May mắn thay, sự suy giảm xảy ra theo cách có thể dự đoán được và do cấu trúc pixel thường chỉ theo hướng ngang.

Để bù đắp cho sự suy giảm hình ảnh vốn có khi chụp ảnh qua màn hình T-OLED, các nhà nghiên cứu đã sử dụng cấu trúc mạng thần kinh U-Net vừa cải thiện tỷ lệ tín hiệu trên nhiễu vừa làm mờ hình ảnh. Nhóm đã có thể đạt được một hình ảnh phục hồi mà hầu như không thể phân biệt được với hình ảnh được chụp trực tiếp.

Sự cải thiện có thể được nhìn thấy trong hình ảnh mẫu bên dưới:

Bản gốc, chụp ảnh bình thường:

Chụp ảnh qua màn hình T-OLED:

Sau khi khôi phục hình ảnh:

Việc tham gia AI vào chụp ảnh cũng cho phép các kỹ thuật thú vị khác như làm mờ hoặc thay thế nền và các kỹ thuật thao tác video khác cho phép gọi điện video tốt hơn và tự nhiên hơn.

Microsoft dường như đang phát triển công việc chủ yếu để sử dụng trên màn hình lớn hơn trong cài đặt hội nghị truyền hình, nhưng tôi chắc chắn rằng nó sẽ áp dụng tương tự cho điện thoại thông minh hàng đầu tiếp theo của bạn.

Đọc thêm về dự án tại Microsoft tại đây.

thông qua WalkingCat