A Microsoft Research csodálatos fotó-helyreállítási algoritmust fejlesztett ki

Olvasási idő ikonra 2 perc olvas


Az olvasók segítenek az MSpoweruser támogatásában. Kaphatunk jutalékot, ha a linkjeinken keresztül vásárol. Eszköztipp ikon

Olvassa el közzétételi oldalunkat, hogy megtudja, hogyan segítheti az MSPowerusert a szerkesztői csapat fenntartásában Tovább

A Microsoft kutatócsoportja, Ziyu Wan, Bo Zhang és mások egy új, mesterséges intelligencia-alapú algoritmust fejlesztettek ki a mély tanulási megközelítés révén súlyosan károsodott régi fényképek helyreállítására.

Ellentétben a hagyományos, felügyelt tanulással megoldható helyreállítási feladatokkal, a valós fényképek romlása összetett, és a szintetikus képek és a valódi régi fényképek közötti tartományszakadék miatt a hálózat nem képes általánosítani.

Új technikájuk egy új hármas tartományú fordítóhálózatot javasol, valódi fényképeket és hatalmas szintetikus képpárokat használva. Konkrétan két variációs automatikus kódolót (VAE) képeznek ki, amelyek rendre átalakítják a régi fényképeket, illetve a tiszta fényképeket két látens térré. A két látens tér közötti fordítást pedig szintetikus párosított adatok segítségével tanuljuk meg.

Hat különböző képen látható az eredeti fotó és egy sokkal továbbfejlesztett változat, miután végigfutották a modellt. Első kép: elhalványult kép, ha egy lány virágot tart. Második kép: Fejlövés egy elhalványult nőről, aki mosolyog, és egy madarat tart a kezén az arca előtt. Harmadik kép: egy kifakult és elszíneződött kép hosszú hajú, szemüveges fiatalról, erőltetett mosollyal. Negyedik kép: Egy ruhát viselő nő kifakult és elszíneződött képe kutyával az ölében. Ötödik kép: Egy mellényt és inget viselő fiú repedt és hajlított fekete-fehér képe. Hatos kép: egy pár erősen megrepedt fekete-fehér képe. A férfi vintage katonai egyenruhát, a nő pedig szüreti ruhát visel. Az összes kép hasonló jó minőségű, a hibákat a modellen való átfutás után eltávolították.

Ez a fordítás jól általánosítható a valódi fényképekre, mivel a tartományrés bezárult a kompakt látens térben. Az egy régi fényképen kevert többszörös károsodások kezelésére egy globális elágazást terveztek egy részleges, nem lokális blokkal, amely a strukturált hibákat, például karcolásokat és porfoltokat célozza meg, egy helyi ágat pedig a strukturálatlan hibákra, például zajokra és homályosságokra. A két ág a látens térben összeolvad, ami javítja a régi fényképek több hibából való visszaállításának képességét. A javasolt módszer felülmúlja a legmodernebb módszereket a régi fotók helyreállításának vizuális minőségét tekintve.

Tekintse meg az alábbi videóban bemutatott technikát:

Sajnos a Microsoft nem tett elérhetővé demóoldalt a technológia kipróbálására, de remélhetőleg a cég megfogadja a tippet.

Olvassa el sokkal részletesebben itt a Microsoftban.

Bővebben a témákról: microsoft kutatás, fotó helyreállítása