Microsoft Research, inanılmaz fotoğraf restorasyon algoritması geliştirdi

Okuma zamanı simgesi 2 dk. okuman


Okuyucular MSpoweruser'ı desteklemeye yardımcı olur. Bağlantılarımız aracılığıyla satın alırsanız komisyon alabiliriz. Araç İpucu Simgesi

MSPoweruser'ın editör ekibini ayakta tutmasına nasıl yardımcı olabileceğinizi öğrenmek için açıklama sayfamızı okuyun. Daha fazla

Microsoft Araştırma ekibi Ziyu Wan, Bo Zhang ve daha fazlası, derin bir öğrenme yaklaşımıyla ciddi bozulma yaşayan eski fotoğrafları geri yüklemek için yeni bir AI tabanlı algoritma geliştirdi.

Denetimli öğrenme yoluyla çözülebilen geleneksel restorasyon görevlerinden farklı olarak, gerçek fotoğraflardaki bozulma karmaşıktır ve sentetik görüntüler ile gerçek eski fotoğraflar arasındaki alan boşluğu, ağın genelleştirilmesini engeller.

Yeni teknikleri, büyük sentetik görüntü çiftleriyle birlikte gerçek fotoğraflardan yararlanarak yeni bir üçlü etki alanı çeviri ağı önermektedir. Spesifik olarak, sırasıyla eski fotoğrafları ve temiz fotoğrafları iki gizli alana dönüştürmek için iki varyasyonel otomatik kodlayıcıyı (VAE) eğitiyorlar. Ve bu iki gizli uzay arasındaki çeviri, sentetik eşleştirilmiş verilerle öğrenilir.

Altı farklı resim, model üzerinden çalıştırıldıktan sonra orijinal fotoğrafı ve çok daha gelişmiş bir versiyonunu gösteriyor. Birinci resim: çiçek tutan bir kızsa solmuş bir resim. İkinci resim: Gülümseyen ve yüzünün önünde elinin üzerine tünemiş bir kuş tutan solgun bir kadının vesikalık fotoğrafı. Üçüncü resim: uzun saçlı ve gözlüklü, zorla gülümsemiş bir gencin solmuş ve rengi solmuş bir görüntüsü. Dördüncü Resim: Kucağında bir köpekle elbise giymiş bir kadının soluk ve rengi solmuş bir görüntüsü. Beşinci resim: Yelek ve gömlek giyen bir çocuğun çatlak ve bükülmüş siyah beyaz görüntüsü. Resim altı: bir çiftin ciddi şekilde çatlamış siyah beyaz bir görüntüsü. Adam eski bir askeri üniforma giyiyor ve kadın eski bir elbise giyiyor. Tüm görüntüler, model üzerinden çalıştırıldıktan sonra kusurlar giderilmiş olarak benzer yüksek kaliteye sahiptir.

Bu çeviri, gerçek fotoğraflara iyi genelleşir, çünkü alan boşluğu, kompakt gizli uzayda kapatılır. Eski bir fotoğrafta karışık birden fazla bozulmayı ele almak için, çizikler ve toz lekeleri gibi yapılandırılmış kusurları hedefleyen kısmi yerel olmayan bir blok ve gürültü ve bulanıklık gibi yapılandırılmamış kusurları hedefleyen yerel bir şube ile küresel bir şube tasarladılar. İki dal, gizli alanda kaynaştırılarak, eski fotoğrafları birden fazla kusurdan geri yüklemek için gelişmiş yeteneklere yol açar. Önerilen yöntem, eski fotoğrafların restorasyonu için görsel kalite açısından en son yöntemlerden daha iyi performans gösteriyor.

Aşağıdaki videoda gösterilen tekniğe bakın:

Ne yazık ki Microsoft, teknolojiyi denemek için bir demo sitesi sunmadı, ancak umarım şirket ipucunu alacaktır.

Daha fazla ayrıntı okuyun Microsoft'ta burada.

Konular hakkında daha fazla bilgi: microsoft araştırması, fotoğraf restorasyonu