Výskum spoločnosti Microsoft vytvára inteligentného virtuálneho asistenta so svojím projektom situovanej interakcie

Ikona času čítania 3 min. čítať

Ikona kalendára Publikované dňa Apríla 9, 2014

publikované dňa Apríla 9, 2014

Čítačky pomáhajú podporovať MSpoweruser. Ak nakupujete prostredníctvom našich odkazov, môžeme získať províziu.

Zatiaľ čo všetci čakáme na vyskúšanie digitálnej asistentky Cortana na Windows Phone 8.1, Microsoft Research pracuje na virtuálnych asistentoch, ktorí zvládnu vašu prácu v reálnom živote pri práci s inými ľuďmi a podobne. Dlhodobým cieľom spoločnosti Microsoft Research je Situovaná interakcia Cieľom projektu je umožniť novú generáciu interaktívnych systémov, ktoré integrujú interakciu a výpočty hlboko do prirodzeného toku každodenných úloh, aktivít a spolupráce. Príklady scenárov zahŕňajú interakciu medzi človekom a robotom, e-home, interaktívne billboardy, systémy, ktoré monitorujú, pomáhajú a koordinujú tímy expertov prostredníctvom zložitých úloh a postupov atď.

Takýto asistent by sa mohol koordinovať s asistentmi iných ľudí, pomáhať pri plánovaní spoločenských stretnutí, pracovných záväzkov a cestovania. Môže predvídať vaše potreby na základe minulých aktivít – napríklad kde ste si užili jedlo – a koordinovať sa s firmami, ktoré ponúkajú špeciálne ponuky. Mohlo by vám to pomôcť vybrať film na základe toho, ktorý sa páčil vašim priateľom.

„Inteligentní, podporní asistenti, ktorí pomáhajú a dopĺňajú ľudí, sú kľúčovou ašpiráciou v informatike,“ hovorí Horvitz, „a základný výskum v tomto priestore zahŕňa zhromažďovanie údajov a pozorovanie ľudí, ktorí konverzujú, spolupracujú a navzájom si pomáhajú, aby sme sa naučili, ako čo najlepšie vyvinúť systémy, ktoré môžu slúžiť v tejto úlohe.“

Aktuálna virtuálna asistentka Monica od Microsoftu má nasledujúce interaktívne funkcie.

Základná interakcia: znázorňuje základnú interakciu jedného účastníka so systémom. Všimnite si rôzne vrstvy analýzy scény (systém sleduje tvár a pózu používateľa, odvodzuje informácie o oblečení, príslušnosti, cieľoch úloh atď.) a prirodzený model zapojenia (systém sa zapája, keď sa používateľ približuje)

Vyvodenie scén a uzemnenie: systémy odvodzujú ciele používateľa z analýzy scény (používateľ je oblečený formálne, teda pravdepodobne externe, preto pravdepodobne chce registráciu), ale tieto informácie zdôvodňuje dialógom. Všimnite si aj uzemnenie čísla budovy.

Modelovanie pozornosti a angažovanosť: systémy monitorujú pozornosť používateľa (pomocou informácií z detektora tváre a sledovania polohy) a podľa toho používateľa zapája.

Manipulácia s ľuďmi čakajúcimi v rade: systém monitoruje viacerých používateľov v scéne a potvrdí prítomnosť čakajúceho používateľa rýchlym pohľadom (červená bodka ukazuje pohľad systému) a ich dočasným zapojením ku koncu konverzácie

Opätovné zapojenie: to isté ako vyššie, len keď sa systém vráti späť, pôvodný používateľ už nevenuje pozornosť. Systém vie, že osoba čaká v rade, upozorní používateľa a znova sa zapojí vyslovením „Prepáčte!“

Dialóg s viacerými účastníkmi: systém vyvodí zo scény (a potvrdí dialógom), že dvaja účastníci sú spolu v skupine. Systém potom pokračuje v konverzácii s viacerými účastníkmi. Všimnite si model pohľadu (červená bodka), ktorý je informáciou o tom, kto je hovoriacim účastníkom a tiež určitými prvkami v štruktúre diskurzu.

Dialóg s viacerými účastníkmi s vedľajšou konverzáciou: podobne ako v predchádzajúcej interakcii; na konci sa používatelia zapoja do bočnej konverzácie. Systém pochopí, že výroky nie sú adresované jemu a po chvíli preruší dvoch užívateľov, aby odovzdali informácie o raketopláne. Všimnite si tiež interakciu s dotykovou obrazovkou, ktorá sa používa ako náhrada v prípadoch, keď rozpoznávanie reči zlyhá.

Dialóg s viacerými účastníkmi a treťou osobou, ktorá čaká: to tiež ilustruje, ako systém zaobchádza s čakajúcim účastníkom pri interakcii so skupinou dvoch používateľov.

Prečítajte si viac o tomto projekte od Microsoft Research.

Viac o témach: microsoft, výskum, roboty, Situovaná interakcia, chytrý, Virtuálny asistent

Pradeep Viswav

Expert na softvér a služby

Pradeep je absolventom informatiky a inžinierstva. Bol tiež študentským partnerom spoločnosti Microsoft. V súčasnosti pracuje v poprednej IT spoločnosti.

Nechaj odpoveď