Microsoft Research a dezvoltat un algoritm uimitor de restaurare a fotografiilor

Echipa de cercetare Microsoft Ziyu Wan, Bo Zhang și alții au dezvoltat un nou algoritm bazat pe inteligență artificială pentru restaurarea fotografiilor vechi care suferă de degradare severă printr-o abordare de învățare profundă.

Spre deosebire de sarcinile convenționale de restaurare care pot fi rezolvate prin învățare supravegheată, degradarea în fotografiile reale este complexă, iar decalajul de domeniu dintre imaginile sintetice și fotografiile vechi reale face ca rețeaua să nu se generalizeze.

Noua lor tehnică propune o nouă rețea de traducere a domeniului triplet prin valorificarea fotografiilor reale împreună cu perechi masive de imagini sintetice. Mai exact, ei antrenează două autoencodere variaționale (VAE) pentru a transforma fotografiile vechi și, respectiv, a curăța fotografiile în două spații latente. Iar traducerea dintre aceste două spații latente se învață cu date perechi sintetice.

Această traducere se generalizează bine la fotografiile reale, deoarece decalajul de domeniu este închis în spațiul latent compact. Pentru a aborda degradările multiple amestecate într-o fotografie veche, ei au proiectat o ramură globală cu un bloc parțial nonlocal care vizează defectele structurate, cum ar fi zgârieturile și petele de praf, și o ramură locală care vizează defectele nestructurate, cum ar fi zgomotele și neclaritatea. Cele două ramuri sunt topite în spațiul latent, ceea ce duce la o capacitate îmbunătățită de a restaura fotografiile vechi din mai multe defecte. Metoda propusă depășește metodele de ultimă generație în ceea ce privește calitatea vizuală pentru restaurarea fotografiilor vechi.

Vedeți tehnica demonstrată în videoclipul de mai jos:

Din păcate, Microsoft nu a pus la dispoziție un site demonstrativ pentru a încerca tehnologia, dar sperăm că compania va accepta indiciu.

Citiți mai multe detalii la Microsoft aici.