Microsoft Research พัฒนาการแก้ไขด้วย AI สำหรับภาพเบลอเนื่องจากกล้อง Under-Display

หลังจากความสำเร็จของกล้องหน้าแบบเจาะรู การพัฒนาครั้งสำคัญต่อไปสำหรับกล้องเซลฟี่คือกล้องใต้จอแสดงผล โดยที่กล้องจะอยู่ด้านหลังหน้าจอ OLED แบบโปร่งใสซึ่งจะยังคงทำงานเป็นจอแสดงผลปกติเมื่อไม่ได้ใช้งาน แต่จะ ให้แสงส่องผ่านได้เพียงพอเพื่อให้กล้องด้านล่างถ่ายภาพที่ใช้งานได้

เป็นปัญหาสุดท้ายที่ Microsoft Research กำลังตรวจสอบอยู่

พวกเขาสังเกตว่าการเลี้ยวเบนจากโครงสร้างพิกเซลของหน้าจออาจทำให้ภาพเบลอ ลดคอนทราสต์ ลดระดับแสงที่ใช้งานได้ และแม้กระทั่งบดบังเนื้อหาภาพบางส่วนโดยสิ้นเชิง ในลักษณะที่ขึ้นอยู่กับการออกแบบพิกเซลแสดงผลของอุปกรณ์

โชคดีที่ความเสื่อมโทรมเกิดขึ้นในรูปแบบที่คาดเดาได้ และเนื่องจากโครงสร้างพิกเซลโดยทั่วไปจะอยู่ในแนวนอนเท่านั้น

เพื่อชดเชยความเสื่อมของภาพที่เกิดขึ้นในการถ่ายภาพผ่านหน้าจอ T-OLED นักวิจัยได้ใช้โครงสร้างโครงข่ายประสาทเทียม U-Net ซึ่งทั้งคู่ปรับปรุงอัตราส่วนสัญญาณต่อสัญญาณรบกวนและทำให้ภาพเบลอ ทีมงานสามารถได้ภาพที่กู้คืนมาซึ่งแทบแยกไม่ออกจากภาพที่ถ่ายโดยตรง

การปรับปรุงสามารถเห็นได้ในภาพตัวอย่างด้านล่าง:

ต้นฉบับ ถ่ายภาพปกติ:

ถ่ายภาพผ่านหน้าจอ T-OLED:

หลังจากการกู้คืนรูปภาพ:

การมีส่วนร่วมของ AI ในการจับภาพยังช่วยให้มีเทคนิคที่น่าสนใจอื่นๆ เช่น การเบลอหรือเปลี่ยนพื้นหลัง และเทคนิคการจัดการวิดีโออื่นๆ ซึ่งช่วยให้การสนทนาทางวิดีโอดีขึ้นและเป็นธรรมชาติมากขึ้น

ดูเหมือนว่า Microsoft จะพัฒนางานเพื่อใช้ในหน้าจอขนาดใหญ่ขึ้นในการตั้งค่าการประชุมทางวิดีโอเป็นหลัก แต่ฉันแน่ใจว่าจะนำไปใช้กับสมาร์ทโฟนรุ่นต่อไปของคุณอย่างเท่าเทียมกัน

อ่านเพิ่มเติมเกี่ยวกับโครงการได้ที่ Microsoft โปรดคลิกที่นี่เพื่ออ่านรายละเอียดเพิ่มเติม.

ผ่านทาง WalkingCat