StabilityAI עובד על טכנולוגיה כדי ליצור תמונות רק על ידי חשיבה; אין צורך בהנחיות: MindEye

רק לפני שנה, יצירת תמונות באמצעות הנחיות היה הדבר הגדול ביותר בעולם. כולם דיברו על זה, ועכשיו נראה שבקרוב זה יהיה נחלת העבר. MindEye של StabilityAI היא גישה חדשה לשחזור ואחזור תמונות ישירות מפעילות המוח של fMRI. מצד שני, דגם ה-AI החדש של Stability AI יכול להפוך תמונות דו-ממדיות לסרטוני 2D.

הדמיית תהודה מגנטית פונקציונלית (fMRI) היא טכניקת הדמיה עצבית המודדת את פעילות המוח על ידי זיהוי שינויים בזרימת הדם. תפקידה של טכנולוגיה זו הוא למפות את תפקוד המוח ולהעריך טיפולים פוטנציאליים למצבים נוירולוגיים.

MindEye מתבסס על מערך נתונים של הקלטות פעילות מוחית ממשתתפים שצפו בסדרה של תמונות סטטיות בתוך סורק MRI. צוות המחקר אימן את המערכת לנתח את ההקלטות הללו או לאחזר את התמונה המקורית ממאגר של מועמדים (שליפה) או ליצור שחזור של התמונה הנצפית.

החוקרים הדגימו את יכולתה של MindEye לעלות על שיטות קודמות במשימות של אחזור תמונות, תוך השגת דיוק של למעלה מ-90% בזיהוי התמונה המקורית ממאגר מועמדים. לצורך שחזור, MindEye משתמשת במודלים גנרטיביים מאומנים מראש

ניתן ליישם את MindEye בתחומים שונים. בתחום הרפואי, יכולתו לשחזר תפיסה חזותית מפעילות מוחית עשויה לאפשר שיטות אבחון והערכה, במיוחד במקרים בהם חולים מתקשים בתקשורת. הפוטנציאל של MindEye לניתוח בזמן אמת מחפש ביצועי ממשק מוח-מחשב משופרים.

הצוות מדגיש מגבלות הקשורות לאיסוף נתונים, כולל זמני הסריקה הארוכים הנדרשים והפוטנציאל לנתונים רועשים עקב תנועת משתתף או חוסר תשומת לב.

עוד כאן.