Microsoft Research พัฒนาอัลกอริธึมการคืนค่ารูปภาพที่น่าทึ่ง

ทีมวิจัยของ Microsoft Ziyu Wan, Bo Zhang และคนอื่นๆ ได้พัฒนาอัลกอริธึมที่ใช้ AI ใหม่สำหรับการกู้คืนภาพถ่ายเก่าที่ได้รับผลกระทบจากการเสื่อมสภาพอย่างรุนแรงผ่านแนวทางการเรียนรู้เชิงลึก

ต่างจากงานฟื้นฟูทั่วไปที่สามารถแก้ไขได้ผ่านการเรียนรู้ภายใต้การดูแล การเสื่อมสภาพในภาพถ่ายจริงนั้นซับซ้อน และช่องว่างระหว่างภาพสังเคราะห์และภาพถ่ายเก่าจริงทำให้เครือข่ายไม่สามารถสรุปได้

เทคนิคใหม่ของพวกเขานำเสนอเครือข่ายการแปลโดเมนแฝดใหม่โดยใช้ประโยชน์จากภาพถ่ายจริงร่วมกับคู่ภาพสังเคราะห์ขนาดใหญ่ โดยเฉพาะอย่างยิ่ง พวกเขาฝึกตัวเข้ารหัสอัตโนมัติ (VAE) แบบแปรผันสองแบบเพื่อแปลงรูปภาพเก่าและรูปภาพที่สะอาดเป็นช่องว่างสองช่องตามลำดับ และการแปลระหว่างช่องว่างแฝงทั้งสองนี้เรียนรู้ด้วยข้อมูลที่จับคู่สังเคราะห์

การแปลนี้ใช้ได้ดีกับภาพถ่ายจริง เนื่องจากช่องว่างของโดเมนถูกปิดลงในพื้นที่แฝงขนาดกะทัดรัด เพื่อจัดการกับความเสื่อมโทรมหลายอย่างปะปนกันในภาพถ่ายเก่าภาพเดียว พวกเขาได้ออกแบบสาขาทั่วโลกด้วยการบล็อกบางส่วนที่ไม่ใช่ในพื้นที่ซึ่งกำหนดเป้าหมายไปที่ข้อบกพร่องที่มีโครงสร้าง เช่น รอยขีดข่วนและจุดฝุ่น และสาขาในพื้นที่ที่กำหนดเป้าหมายไปยังข้อบกพร่องที่ไม่มีโครงสร้าง เช่น เสียงและความพร่ามัว ทั้งสองสาขาถูกหลอมรวมเข้าด้วยกันในพื้นที่แฝง นำไปสู่ความสามารถในการกู้คืนรูปภาพเก่าจากข้อบกพร่องหลายอย่างได้ดีขึ้น วิธีการที่เสนอนี้มีประสิทธิภาพเหนือกว่าวิธีการที่ทันสมัยในแง่ของคุณภาพของภาพสำหรับการกู้คืนภาพถ่ายเก่า

ดูเทคนิคที่แสดงในวิดีโอด้านล่าง:

น่าเสียดายที่ Microsoft ไม่ได้เปิดไซต์สาธิตให้ทดลองใช้เทคโนโลยี แต่หวังว่าบริษัทจะรับคำแนะนำ

อ่านรายละเอียดเพิ่มเติม ที่ Microsoft ที่นี่.