Microsoft Research kehittää hämmästyttävän valokuvien restaurointialgoritmin

Microsoftin tutkimustiimi Ziyu Wan, Bo Zhang ja monet muut ovat kehittäneet uuden tekoälyyn perustuvan algoritmin vanhojen valokuvien palauttamiseen, jotka kärsivät vakavasta huonontumisesta syvän oppimisen kautta.

Toisin kuin perinteiset entisöintitehtävät, jotka voidaan ratkaista ohjatulla oppimisella, todellisten valokuvien huononeminen on monimutkaista, ja synteettisten kuvien ja todellisten vanhojen valokuvien välinen verkkoalue ei pysty yleistämään.

Heidän uusi tekniikkansa ehdottaa uutta kolmiulotteisen verkkotunnuksen käännösverkkoa hyödyntämällä oikeita valokuvia sekä massiivisia synteettisiä kuvapareja. Tarkemmin sanottuna ne kouluttavat kaksi variaatioautoenkooderia (VAE) muuttamaan vanhat valokuvat ja puhdistamaan valokuvat kahdeksi piileväksi tilaan. Ja näiden kahden piilevän tilan välinen käännös opitaan synteettisten parillisten tietojen avulla.

Tämä käännös yleistyy hyvin todellisiin valokuviin, koska verkkoalueen aukko on suljettu kompaktissa piilevässä tilassa. Yhdessä vanhassa valokuvassa sekoittuneiden useiden huonontumisten korjaamiseksi he suunnittelivat maailmanlaajuisen haaran, jossa on osittainen ei-paikallinen lohko, joka kohdistuu rakenteellisiin virheisiin, kuten naarmuihin ja pölytäpliin, ja paikallisen haaran, joka kohdistuu rakenteettomiin virheisiin, kuten meluihin ja epäselvyyksiin. Nämä kaksi haaraa sulautuvat piilevään tilaan, mikä parantaa kykyä palauttaa vanhoja valokuvia useista vioista. Ehdotettu menetelmä ylittää uusimmat menetelmät vanhojen valokuvien restauroinnin visuaalisen laadun suhteen.

Katso alla olevalla videolla esitelty tekniikka:

Valitettavasti Microsoft ei ole julkaissut esittelysivustoa teknologian kokeilemiseksi, mutta toivottavasti yritys ottaa vihjeen vastaan.

Lue paljon tarkemmin Microsoftissa täällä.