Microsoft Research מפתחת אלגוריתם מדהים של שחזור תמונות

צוות המחקר של מיקרוסופט Ziyu Wan, Bo Zhang ועוד פיתחו אלגוריתם חדש מבוסס בינה מלאכותית לשחזור תמונות ישנות שסובלות מהשפלה חמורה באמצעות גישת למידה עמוקה.

בניגוד למשימות שחזור קונבנציונליות שניתן לפתור באמצעות למידה מפוקחת, השפלה בתמונות אמיתיות היא מורכבת והפער התחום בין תמונות סינתטיות לתמונות ישנות אמיתיות גורם לרשת לא להכליל.

הטכניקה החדשה שלהם מציעה רשת תרגום תחום טריפלט חדשנית על ידי מינוף תמונות אמיתיות יחד עם צמדי תמונות סינתטיים מסיביים. באופן ספציפי, הם מאמנים שני מקודדים אוטומטיים וריאציות (VAEs) כדי להפוך תמונות ישנות ותמונות נקיות לשני חללים סמויים, בהתאמה. והתרגום בין שני המרחבים הסמויים הללו נלמד עם נתונים זוגיים סינתטיים.

תרגום זה מכליל היטב לתמונות אמיתיות מכיוון שפער התחום נסגר במרחב הסמוי הקומפקטי. כדי להתמודד עם השפלות מרובות מעורבות בתמונה ישנה אחת, הם תכננו סניף גלובלי עם בלוק חלקי לא מקומי המכוון לפגמים המובנים, כגון שריטות וכתמי אבק, וסניף מקומי המכוון לפגמים הלא מובנים, כגון רעשים וטשטוש. שני הענפים מתמזגים בחלל הסמוי, מה שמוביל ליכולת משופרת לשחזר תמונות ישנות מפגמים מרובים. השיטה המוצעת גוברת על השיטות המתקדמות ביותר מבחינת איכות ויזואלית עבור שחזור תמונות ישנות.

ראה את הטכניקה המודגמת בסרטון למטה:

למרבה הצער, מיקרוסופט לא העמידה אתר הדגמה לזמין כדי לנסות את הטכנולוגיה, אבל אני מקווה שהחברה תקבל את הרמז.

קרא הרבה יותר פרטים ב- Microsoft כאן.