מחקר של מיקרוסופט עובד עם AI שיכול לספר את הסיפור של צילומי החג שלך

AI שיכול לתאר תמונות כבר פועל באינטרנט, הוספת כיתובים לתמונות בפייסבוק למשל. כעת Microsoft Research לוקחת את הטכנולוגיה לשלב הבא, ומבקשת מה-AI שלהם לספר את הסיפור של סדרת תמונות.

לדוגמה, בעוד שתוכנת כתוביות תמונה עשויה לצלם חמש תמונות ולומר, "זוהי תמונה של משפחה; זו תמונה של עוגה; זו תמונה של כלב; זו תמונה של חוף ים," תוכנית מספרי הסיפור עשויה לצלם את אותן תמונות ולומר, "המשפחה התכנסה לארוחת בישול; היה להם הרבה אוכל טעים; הכלב היה שמח להיות שם; הם נהנו מאוד על החוף; הם אפילו שחו במים."

בעתיד, סיפור ממוחשב יכול לעזור לאנשים ליצור סיפורים אוטומטית עבור מצגות של תמונות שהם מעלים לרשתות החברתיות, אמר מיטשל. "תוכל לעזור לאנשים לחלוק את החוויות שלהם תוך צמצום עבודה מטופשת שלחלק מהאנשים די מייגעת," היא אמרה. סיפור סיפורים ממוחשב "יכול לעזור גם לאנשים עם לקויות ראייה, לפתוח תמונות לאנשים שאינם יכולים לראות אותן."

"המטרה היא לעזור לתת AI יותר אינטליגנציה דמוית אנוש, לעזור להם להבין דברים ברמה יותר מופשטת - מה זה אומר להיות מהנה או מצמרר או מוזר או מעניין", אמרה מחברת המחקר הבכירה מרגרט מיטשל, מדענית מחשבים ב- מחקר של מיקרוסופט. "אנשים העבירו סיפורים במשך עידנים, ומשתמשים בהם כדי להעביר את המוסר, האסטרטגיות והחוכמה שלנו. עם ההתמקדות שלנו בסיפור סיפורים, אנו מקווים לעזור לבינה מלאכותית להבין מושגים אנושיים בצורה בטוחה ומועילה מאוד עבור האנושות, במקום ללמד אותה כיצד לנצח את האנושות."

אם בינה מלאכותית תלמד אי פעם לספר סיפורים על סמך רצפי תמונות, "זוהי קפיצת מדרגה לקראת לעשות את אותו הדבר עבור וידאו", אמר מיטשל. "זה יכול לעזור לספק יישומים מעניינים. לדוגמה, עבור מצלמות אבטחה, אולי תרצה רק סיכום של כל דבר ראוי לציון, או שאתה יכול לצייץ באופן אוטומטי אירועי ציוץ בשידור חי", אמרה.

החוקרים יציגו את ממצאיהם בסן דייגו במפגש השנתי של פרק צפון אמריקה של האגודה לבלשנות חישובית בהמשך החודש.